HTTP-Statuscodes-Referenz

Yandex veröffentlicht nicht nur, was die einzelnen Statuscodes bedeuten, sondern auch, wann sie zu verwenden sind, und einige dieser Empfehlungen weichen von der gängigen Praxis ab. Dies ist die Referenz, die Sie vor der Auswahl eines Weiterleitungstyps prüfen sollten.

Weiterleitungen

• 301 Moved Permanently. Der Roboter indiziert das weiterleitende Dokument nicht, indiziert jedoch das Ziel. Yandex fügt eine Anweisung hinzu, die selten anderswo erwähnt wird: halten Sie die Weiterleitung mindestens sechs Monate lang aktiv , damit Suchmaschinen sie korrekt verarbeiten. Migrationen, bei denen der alte Host nach einem Monat außer Betrieb genommen wird, werfen die Übertragung weg.
• 302 Found. Nur temporär — A/B-Tests und Wartung. Wenn es permanent sein soll, verwenden Sie 301.
• 303 See Other. Zum Weiterleiten eines Benutzers nach dem Absenden eines Formulars. Eine Seite muss zurückkehren 200 , um in den Ergebnissen zu erscheinen.
• 304 Not Modified. Yandex empfiehlt dies aktiv für Ressourcen, die selten aktualisiert werden, häufig angefordert werden und maßgeblich zum Traffic beitragen — Bilder, CSS, JavaScript. Es beschleunigt die Indizierung und reduziert den Traffic.
• 305 Use Proxy. Aus Sicherheitsgründen veraltet; nicht verwenden.
• 307 und 308. Die methodenerhaltenden Äquivalente von 302 und 301, die die Anfragemethode, den Body und die ursprünglichen Header beibehalten.
• 300 Multiple Choices. Der Roboter kann nicht erkennen, welche Ressource die URL meint; korrigieren Sie die Header.

Client-Fehler, die es wert sind, sorgfältig gelesen zu werden

• 403 Forbidden. Zugriff verweigert — um die Seite zu indizieren, gewähren Sie Zugriff. Hier zeigt sich zu aggressive Bot-Filterung.
• 404 Not Found. Yandexs Anleitung ist gelassen: Wenn Sie einen Abschnitt entfernt haben, blockieren Sie ihn in robots.txt; wenn die Seite nie existiert hat, ignorieren Sie den Fehler — jemand hat falsch auf Ihre Website verlinkt. Ein 404-Bericht ist nicht automatisch eine Aufgabenliste.
• 405 Ungültige Methode — konfigurieren Sie den Server so, dass die erforderlichen Methoden unterstützt werden; überprüfen Sie die CORS-Einstellungen.
• 406 Unzulässig — das Dokument ist vorhanden, aber die Sprache oder Kodierung wird vom Roboter nicht unterstützt.
• 401 und 402 — Authentifizierung erforderlich bzw. Server- oder Zahlungskonfigurationsfehler.
• 400 Bad Request — fehlerhafte Anfrage; Header und Parameter müssen der HTTP-Spezifikation entsprechen.

Der praktische Punkt

Die meisten Websites verwenden 301 und 302 für alles und implementieren niemals 304. Das ist die Lücke, die es sich lohnt, auf einer großen Website zu schließen: Bedingte Antworten auf statische Assets sind einer der wenigen Crawl-Effizienz-Hebel, die Yandex ausdrücklich empfiehlt.