Das Entfernen einer Seite aus der Suche ist ein zweistufiger Vorgang, und das Überspringen des ersten lässt den zweiten fehlschlagen. Verbieten Sie zuerst die Indexierung und bitten Sie dann Yandex sich zu beeilen.
Schritt 1 — verbieten
Wenn die Seite von der Website verschwunden ist: Disallow in robots.txt, oder eine Serverantwort von 404, 403 oder 410. A 301 wird zusätzlich empfohlen, für den Fall, dass Benutzer alten Links folgen.
Wenn die Seite existiert, aber nicht erscheinen soll: the robots Meta-Tag mit noindex, oder einer dieser Statuscodes. Blockieren Sie eine solche Seite nicht in robots.txt — der Roboter kann dann nicht lesen noindex.
Jede Methode entfernt die Seite aus der Datenbank innerhalb einer Woche nachdem der Roboter es bemerkt hat. Es gibt einen Vorbehalt für robots.txt allein: eine blockierte Seite kann gelegentlich immer noch in den Ergebnissen erscheinen, zum Beispiel wenn andere Websites darauf verlinken. Für echte Vertraulichkeit reicht das Blockieren nicht aus.
Schritt 2 — beschleunigen
Tools → Seiten aus den Suchergebnissen entfernen, entweder nach URL (bis zu 500 pro Site und Tag) oder nach Präfix (bis zu 20 Präfixe pro Tag) für ein Verzeichnis, die gesamte Site oder URLs mit Parametern. Das Tool funktioniert ohne Verifizierung für einzelne URLs; die Präfixentfernung erfordert eine verifizierte Site.
Die Bedingung: der Roboter entfernt hier eingereichte Seiten nur wenn Disallow ist für sie eingestellt in robots.txt. Deshalb ist die Reihenfolge wichtig.
Die Status
- In der Löschwarteschlange — der Roboter überprüft die Antwort und das Verbot.
- In Bearbeitung — überprüft; Entfernung innerhalb von 24 Stunden.
- Gelöscht.
- Abgelehnt — die Seite ist weiterhin für die Indexierung zugelassen oder der Server antwortet etwas anderes als 404, 403 oder 410.
Eine Seite zurücklegen
Entfernen Sie das Verbot. Die Seite kehrt zurück, wenn der Roboter das nächste mal crawlt und es bemerkt — was bis zu drei Wochen dauern kann, was die Asymmetrie ist, die vor der Verwendung der Präfixoption abgewogen werden muss.
So setzen wir das um
The rejected status almost always means the same thing: someone used the tool without setting the prohibition first. We do it in the documented order and check the response code before submitting. The three-week reinstatement figure is why we are cautious with prefix removals — deleting a directory takes a day and getting it back can cost most of a month.
Verwandte Leistungen