Sitemap-Dateien

Eine Sitemap teilt Yandex die aktuelle Struktur der Website mit. Sie kann deklariert werden in robots.txt oder auf der Seite für Sitemap-Dateien hinzugefügt werden; in jedem Fall lädt der Roboter sie herunter innerhalb von zwei Wochen, und jede Datei – einschließlich jeder in einer Indexdatei aufgeführten Datei – wird separat verarbeitet.

Die vier Status

• OK — analysiert und geladen; indexierte Seiten erscheinen innerhalb von zwei Wochen in den Ergebnissen.
• Weiterleitung — die Sitemap-URL leitet um. Entfernen Sie die Weiterleitung.
• Fehler — fehlerhaft; der Link zeigt Details.
• Nicht indexiert — der Server antwortete mit etwas anderem als 200, oder robots.txt blockiert den Zugriff auf die Datei. Überprüfen Sie dies mit dem Server-Antwort-Tool unter Verwendung des vollständigen Pfads.

Aktualisierung: Ein Kontingent, das man kennen sollte

Eine aktualisierte Datei muss nicht entfernt und neu hinzugefügt werden – der Roboter überprüft sie regelmäßig. Die Verarbeitung kann über die Aktualisierungssteuerung erzwingen werden, und jede Datei in einer Indexdatei kann einzeln ausgelöst werden. Dies ist jedoch beschränkt auf 10 Nutzungen pro Host, wonach Sie warten müssen 30 Tage ab dem ersten Versuch, wobei das genaue Datum in der Konsole angezeigt wird. Wenn Sie alle zehn an einem einzigen Nachmittag der Ungeduld aufbrauchen, bleibt nichts für die Migration zwei Wochen später übrig.

Strategie für große Websites

Yandexs eigener Rat ist kontraintuitiv und korrekt: Die Sitemap muss nicht alles enthalten. Seiten, die Yandex bereits kennt, können weggelassen werden, wodurch neue und häufig aktualisierte Seiten verbleiben – und bei einer Indexdatei werden die volatilen Dateien markiert mit lastmod. Crawl-Statistiken zeigen, was Yandex bereits weiß. Dies verwandelt die Sitemap von einem statischen Inventar in einen Änderungsupload, wofür der Roboter sie tatsächlich nutzt.

Zwei verwirrende Verhaltensweisen, erklärt

• Die Sitemap wird als ausgeschlossene Seite mit „ungültiges Dokumentformat“ angezeigt. Nur zur Information. Der Roboter hat versucht, das XML als gewöhnliche Seite zu indexieren; dies hat keinen Einfluss auf die Verarbeitung und die Datei nimmt nicht an der Suche teil.
• „Unbekannter Tag“-Fehler. Die Datei enthält Elemente, die Yandex nicht unterstützt – zum Beispiel einen Verweis auf eine mobile Version. Nicht unterstützte Elemente werden ignoriert und unterstützte verarbeitet, sodass die Datei nicht geändert werden muss.

Entfernung

Löschen Sie die Datei in der Konsole und entfernen Sie die Sitemap -Direktive aus robots.txt, sonst findet der Roboter sie immer wieder. Sie wird innerhalb weniger Wochen aus der Datenbank gelöscht.