Plus de statistiques et d'analyses des fichiers robots.txt

06 février 2006

Aujourd’hui, nous avons publié de nouvelles fonctionnalités pour Sitemaps.

analyse robots.txt

Si le site possède un
fichier robots.txt,
le nouvel onglet robots.txt
fournit la vue de Googlebot

de ce fichier, y compris la date à laquelle Googlebot y a accédé pour la dernière fois, le statut qu’il renvoie et s’il bloque l’accès à votre page d’accueil. Cet onglet répertorie également toutes les erreurs de syntaxe dans le fichier.

Vous pouvez saisir une liste d’URL pour voir si le fichier robots.txt les autorise ou les bloque.

Vous pouvez également tester les modifications apportées à votre fichier robots.txt en les saisissant ici et en les testant par rapport à l’agent utilisateur Googlebot, d’autres agents utilisateurs Google ou le standard Robots. Cela vous permet d’expérimenter des modifications pour voir leur impact sur l’exploration de votre site, et de vous assurer qu’il n’y a pas d’erreurs dans le fichier avant d’appliquer les modifications sur votre site.

Si vous n’avez pas de fichier robots.txt, vous pouvez utiliser cette page pour tester un fichier robots.txt potentiel avant de l’ajouter à votre site.

Plus de statistiques

Les statistiques d’exploration incluent désormais la page de votre site ayant le PageRank le plus élevé, par mois, pour les trois derniers mois.

L’analyse des pages inclut désormais une liste des mots les plus courants dans le contenu de votre site et dans les liens externes pointant vers votre site. Cela vous donne des informations supplémentaires sur les raisons pour lesquelles votre site peut apparaître pour des requêtes de recherche particulières. Publié par