Es ist schon eine Weile her, dass wir diesen Blogbeitrag veröffentlicht haben. Einige der Informationen sind möglicherweise veraltet (einige Bilder fehlen zum Beispiel und einige Links funktionieren möglicherweise nicht mehr).
13. Februar 2006
Wir haben gerade einige Probleme behoben, auf die uns unsere
Google Group

-Mitglieder aufmerksam gemacht haben.
Groß- und Kleinschreibung in robots.txt-Zeilen Unser robots.txt-Analysetool hat Zeilen mit Großbuchstaben nicht korrekt interpretiert. Dies wurde behoben. Alle Ergebnisse mit URLs, die Großbuchstaben enthalten, werden korrekt verarbeitet. Beachten Sie, dass in einer robots.txt-Datei die Groß- und Kleinschreibung der Regeln keine Rolle spielt. Zum Beispiel Disallow: und disallow: werden auf dieselbe Weise interpretiert. Die Groß- und Kleinschreibung von URLs spielt
jedoch eine Rolle. Für die folgende robots.txt-Datei:
https://www.example.com/Myfile.html ist also blockiert. Aber
https://www.example.com/myfile.html
ist nicht blockiert.

Andere Google User-agents als GooglebotUnser robots.txt-Analysetool hat robots.txt-Dateien für andere Google User-agents als Googlebot nicht korrekt verarbeitet. Dies wurde behoben. Die Google User-agents, für die wir Analysen bereitstellen, sind:
Googlebot-Mobile:durchsucht Seiten für unserenmobilen Index
Googlebot-Image:durchsucht Seiten für unserenBilderindex
Googlebot-MediaPartners: durchsucht Seiten zur Bestimmung von
AdSense-Inhalten
(wird nur verwendet,
wenn Sie AdSense-Anzeigen auf Ihrer Website schalten)
robots.txt-Dateien mit zusätzlichen Anfangszeichen
Einige robots.txt-Dateien haben zusätzliche Zeichen vor dem Beginn der ersten Regel. Einige Texteditoren fügen diese Zeichen in die Datei ein, aber Sie können sie im Editor nicht sehen. Als das Tool diese Zeichen verarbeitete, meldete es einen Syntaxfehler. Das Tool ahmt nun das Verhalten von Googlebot nach und ignoriert diese zusätzlichen Zeichen.
Groß- und Kleinschreibung in Website-URLsWenn Sie eine Website hinzufügen, wandeln wir nun alle Buchstaben im Domainteil der URL in Kleinbuchstaben um, unabhängig davon, wie Sie die Buchstaben eingegeben haben. Wenn Sie beispielsweise
https://www.Example.com/ eingeben, konvertieren wir dies in https://www.example.com/in Ihrem Konto. Dies gilt nur für die Domain, wenn Sie also beispielsweise
https://www.Example.com/MySite/hinzufügen, konvertieren wir es in
So setzen wir das um
We archive Search Central announcements because client questions often trace back to a change that was announced years ago. Reading the original is faster than reconstructing it from second-hand summaries.
Verwandte Leistungen