Robots.txt, mehrsprachige URL nicht zulassen

Ich habe eine öffentliche Seite, auf der sich Benutzer nicht anmelden dürfen. So habe ich eine URL, dass es keine Verbindung zu und Sie müssen manuell eingeben und dann anmelden.Robots.txt, mehrsprachige URL nicht zulassen

Die URL ist jedoch mehrsprachig, so dass es "/ SV/Account/Logon" oder "/ DE/Account/Logon "etc etc. Kann ich diese URL für alle Sprachen indizieren lassen?

Quelle

2010-09-03 Oskar Kjellin

Diese URL könnte Ihnen helfen, http://www.robotstxt.org/robotstxt.html. Es wird in Ihrem Fall keine Wildcard Ausgrenzung Sie alle Sprach Urls spezifischen Login in robot.txt

aktualisieren

Sie in Ihrer robots.txt Disallow: /folder/subfolder/ oder Disallow: /folder/ Datei setzen können müssen hinzufügen

Quelle

2010-09-03 08:32:17

Danke für die Antwort. Ich lese das und will das nicht tun. Zum Beispiel könnten andere Benutzer weitere Sprachen über die Admin-Oberfläche hinzufügen und sie wissen nicht, wie sie die robots.txt bearbeiten sollen. Vielleicht kann ich es aus meinem Code bearbeiten, wenn Sie weitere Sprachen hinzufügen –

@Oskar können Sie auch solche Seiten unter einem einzigen Ordner verschieben und fügen Sie diesen Ordner in der Ausnahmenliste in robots.txt –

@ajay_whiz Sie sind alle unter dem gleichen Ordner. Kann ich aber Ordner schreiben? Ich dachte, die URLs, wo das einzige, was sich auf diese –

Robots.txt, mehrsprachige URL nicht zulassen

Antwort

Verwandte Themen