Mittwoch, 24. November 2010
Wissen Sie, wie Googles Crawler, der Googlebot, mit widersprüchlichen Regeln in Ihrer robots.txt-Datei umgeht? Wissen Sie, wie Sie die Indexierung einer PDF-Datei verhindern können? Kennen Sie das Lieblingslied des Googlebots? Die Antworten auf diese Fragen (bis auf die letzte :)) sowie viele weitere Informationen zur Steuerung des Crawlings und der Indexierung Ihrer Website sind jetzt verfügbar auf
code.google.com:

Steuerung von Crawling und Indexierung

Jetzt haben Website-Betreiber eine umfassende Ressource, in der sie sich über robots.txt-Dateien,
robots meta -Tags und X-Robots-Tag -HTTP-Header-Regeln informieren können. Bitte teilen Sie Ihre Kommentare mit und wenn Sie Fragen haben, können Sie diese in unserem
Webmaster-Hilfeforum.
So setzen wir das um
We archive Search Central announcements because client questions often trace back to a change that was announced years ago. Reading the original is faster than reconstructing it from second-hand summaries.
Verwandte Leistungen