Jede ausgeschlossene Seite hat einen angegebenen Grund, der unter Indexing → Searchable pages → Excluded pages aufgeführt ist. Yandex ist hier ungewöhnlich transparent – Google zeigt nichts Vergleichbares –, und der Grund ist die Diagnose, weshalb die Liste nach Status statt nach URL gelesen werden sollte.
Die Ausschlussgründe
- Geringer Wert oder geringe Nachfrage – der Algorithmus hat sich entschieden, sie nicht einzubeziehen. Kein Verstoß.
- Download- oder Verarbeitungsfehler (3XX, 4XX, 5XX) – überprüfen Sie dies mit der Serverantwortprüfung; bestätigen Sie, dass sich die Seite in der Sitemap befindet und keine Direktive sie blockiert.
- In robots.txt blockiert oder durch
noindex– entfernen Sie das Verbot. Wenn Sie es nicht hinzugefügt haben, fragen Sie den Hosting-Provider oder Registrar und prüfen Sie, ob die Domain abgelaufen ist. - Die Seite leitet den Roboter anderswohin um – bestätigen Sie, dass die Weiterleitung beabsichtigt ist.
- Duplikat einer anderen Seite.
- Nicht kanonisch – die Seite verweist mit
rel="canonical"auf einen anderen Ort. Bestätigen Sie, dass dies gewollt ist. - Als alternative Adresse erkanntes Ziel — die Spiegelgruppenbildung hat es absorbiert; das Aufheben der Gruppierung ist ein separates Verfahren.
- Verstöße auf der Website gefunden – überprüfen Sie Sicherheit und Verstöße.
Zwei Fragen, die bei jedem Audit auftauchen
„Die Seite öffnet sich in meinem Browser einwandfrei.“ Yandex nennt den Grund direkt: Die Header, die der Roboter sendet, unterscheiden sich von denen des Browsers, sodass eine Seite für einen Browser funktionieren und für den Roboter fehlschlagen kann. Außerdem verlässt eine wegen eines Download-Fehlers ausgeschlossene Seite die Liste erst, wenn sie für den Roboter wieder verfügbar ist – überprüfen Sie die Serverantwort, und wenn sie 200 OKzurückgibt, warten Sie auf den nächsten Crawl.
„Diese Seiten existieren nicht mehr.“ Die Liste enthält URLs, die der Roboter erreicht, aber nicht indexiert hat, einschließlich URLs, die nicht mehr existieren. Sie verschwinden erst, wenn sie für einen gewissen Zeitraum für den Roboter nicht verfügbar sind und weder intern noch extern auf sie verlinkt wird. Yandex bekräftigt hier die Beruhigung: Ausgeschlossene Seiten beeinträchtigen die Position der Website nicht.
Das Muster hinter den meisten großen Ausschlusslisten
Yandex benennt es ausdrücklich: Produkte, die sich nur durch Farbe, Größe oder Konfiguration unterscheiden; Paginierungsseiten; Produktauswahl- und Vergleichsseiten; Bildseiten ohne Text. Automatisch generierte title und description Paare, die sich gegenseitig duplizieren, verschlimmern dies. Auf einer Katalog-Website ist dies normalerweise eine Template-Entscheidung und nicht Tausende separater Probleme.
Nach der Behebung
Reichen Sie die Seite zur Reindizierung ein, anstatt zu warten. Der Roboter besucht ausgeschlossene Seiten weiterhin, und ein spezieller Algorithmus bewertet sie vor jedem Index-Update neu, sodass eine korrigierte Seite innerhalb von etwa zwei Wochen zurückkehren kann.
So setzen wir das um
We work this list grouped by status and sorted by count, because a hundred exclusions almost always reduce to two template causes. The status that most often turns out to be a genuine mistake is “not canonical”: a canonical tag generated by a plugin pointing every filtered page at the category root, quietly removing pages the client intended to rank. It is invisible in a browser and obvious in this report.
Verwandte Leistungen