Dienstag, 5. August 2008
Wenn Googlebot das Web crawlt, stößt er oft auf das, was wir einen “unendlichen Raum” nennen. Dies ist eine sehr große Anzahl von Links, die Googlebot normalerweise wenig oder gar keinen neuen Inhalt zum Indexieren bieten. Wenn dies auf Ihrer Website passiert, kann das Crawlen dieser URLs unnötige Bandbreite verbrauchen und dazu führen, dass Googlebot den echten Inhalt auf Ihrer Website nicht vollständig indexiert.
Kürzlich haben wir damit begonnen, Website-Besitzer zu benachrichtigen, wenn wir dieses Problem auf ihren Websites entdecken. Wie die meisten Nachrichten, die wir senden, finden Sie diese in den
Webmaster-Tools
im Nachrichten-Center. Sie möchten wahrscheinlich sofort wissen, ob Googlebot dieses oder andere Probleme beim Crawlen Ihrer Websites hat. Verifizieren Sie Ihre Website daher mit den Webmaster-Tools und überprüfen Sie ab und zu das Nachrichten-Center.
Beispiele für einen unendlichen Raum
Das klassische Beispiel für einen “unendlichen Raum” ist ein Kalender mit einem “Nächster Monat”-Link. Es ist möglich, diesen “Nächster Monat”-Links für immer zu folgen! Das ist natürlich nicht das, was Googlebot tun soll. Googlebot ist klug genug, einige davon selbst herauszufinden, aber es gibt viele Möglichkeiten, einen unendlichen Raum zu schaffen, und wir erkennen möglicherweise nicht alle.
Ein weiteres häufiges Szenario sind Websites, die das Filtern von Suchergebnissen auf vielfältige Weise ermöglichen. Eine Shopping-Website ermöglicht möglicherweise das Finden von Kleidungsstücken durch Filtern nach Kategorie, Preis, Farbe, Marke, Stil usw. Die Anzahl der möglichen Filterkombinationen kann exponentiell wachsen. Dies kann Tausende von URLs erzeugen, die alle eine Untergruppe der verkauften Artikel finden. Dies mag für Ihre Nutzer bequem sein, ist aber für den Googlebot, der einfach alles finden möchte&mdashl;und zwar einmal!, nicht sehr hilfreich.
Behebung von Problemen mit dem unendlichen Raum
Unser
Hilfeartikel zu den Webmaster-Tools
beschreibt weitere Wege, wie unendliche Räume entstehen können, und gibt Empfehlungen, wie das Problem vermieden werden kann. Eine Lösung besteht darin, ganze Kategorien dynamisch generierter Links mithilfe Ihrer robots.txt-Datei zu eliminieren.
Das Hilfezentrum bietet zahlreiche Informationen zur Verwendung von robots.txt.
Wenn Sie das tun,
vergessen Sie nicht zu überprüfen, ob Googlebot alle Ihre Inhalte
auf andere Weise finden kann. Eine weitere Option ist das Blockieren dieser problematischen Links mit einem nofollow
Link-Attribut. Wenn Sie
weitere Informationen zu nofollow Links wünschen, schauen Sie im Webmaster-Hilfezentrum vorbei.
So setzen wir das um
We archive Search Central announcements because client questions often trace back to a change that was announced years ago. Reading the original is faster than reconstructing it from second-hand summaries.
Verwandte Leistungen