Ich entwickle einen Website-Crawler mit Golang. Als ich versuchte, einige Websites zu crawlen, bekomme ich seltsame Ergebnisse. Die Root-URL einer Website gibt das Skript-Tag wie unten gezeigt zurück.HTML-Datei mit Skript-Tag nur
<script>window.location="index.php";</script>
Und es leitet zur index.php Seite um. Warum Benutzer diesen Ansatz verwenden, um Benutzer auf die Indexseite umzuleiten. Jede Sicherheitslücke mit diesem Ansatz? Und wie kann ich mit dieser Situation im Crawler umgehen?
Was meinen Sie mit Weiterleitungen zur index.php Seite? Wo rennst du den Crawler? Im Terminal oder im Web? –
wenn ich curl oder postman benutze dann bekomme ich diesen text aber mit browser sehe ich index.php – degendra