Wie kann man vermeiden gecrawlt/bestraft von Google

Question

ÜBERBLICK

Ich mag einige Django Websites mit Zufallsdaten auf einem Produktionsserver testen echten Domain-Namen, aber diese Websites einfache Tests mit möglichen dupliziert werden Daten (wahrscheinlich nicht nach Google-Regeln). Ich weiß normalerweise, dass Sie dafür eine Entwicklungs/Staging/virtuelle Box für eine solche Aufgabe verwenden, aber ich möchte direkt die Produktions-Box mit dem echten DNS verwenden.

Jetzt bin ich irgendwie neu auf Website-Entwicklung und SEO, und ich würde nicht gerne mit SEO und Google Chaos.

Was wäre der richtige Weg, um hier fortzufahren? Soll ich irgendwie vermeiden, von Google indiziert/gecrawlt zu werden? Irgendwelche anderen Ratschläge?

Answer 1

Sie können die vollständige Indizierung Ihrer Seite verbieten und später (wenn Sie mit der Codierung fertig sind) diese erneut aktivieren.

Das ist wahrscheinlich der beste Weg, weil Google nicht "schlechte Seiten" krabbelt (zum Beispiel, wenn Ihre Website noch in Entwicklung ist) und Sie somit kein Ranking bekommen (genannt Page Ranking wenn Sie schauen wollen es hoch).