Utilisation de la balise méta robots

mardi 6 mars 2007

Récemment, Danny Sullivan a soulevé de bonnes questions sur la façon dont
les moteurs de recherche gèrent meta balises.
Voici quelques réponses sur la façon dont nous gérons ces balises chez Google.

Valeurs de contenu multiples

Nous vous recommandons de placer toutes les valeurs de contenu dans un meta étiquette. Cela garde le meta balises faciles à
lire et réduit les risques de conflits. Par exemple:

Si la page contient plusieurs meta balises du même type, nous agrégerons les valeurs de contenu.
Par exemple, nous interpréterons

de la même manière que :

Si les valeurs de contenu sont en conflit, nous utiliserons la plus restrictive. Donc, si la page a ces meta balises :

Nous obéirons au noindex valeur.

Valeurs de contenu inutiles

Par défaut, Googlebot indexe une page et suit les liens qu’elle contient. Il n’est donc pas nécessaire de baliser les pages index ou follow.

Diriger un robots meta balise spécifiquement sur Googlebot

Pour fournir des instructions pour tous les moteurs de recherche, définissez le méta-nom sur robots. À
Pour fournir des instructions uniquement pour Googlebot, définissez le méta-nom sur Googlebot. Si tu veux
pour fournir des instructions différentes pour différents moteurs de recherche (par exemple, si vous voulez un
moteur de recherche pour indexer une page, mais pas un autre), il est préférable d’utiliser un meta balise pour chaque moteur de recherche plutôt que d’utiliser un générique robots meta balise combinée avec une spécifique. Tu peux trouver liste des bots sur robotstxt.org.

Casse et espacement

Googlebot comprend n’importe quelle combinaison de minuscules et de majuscules. Donc chacun de ces meta les balises sont interprétées exactement de la même manière :

Si vous avez plusieurs valeurs de contenu, vous devez placer une virgule entre elles, mais cela importe peu
si vous incluez également des espaces. Donc ce qui suit meta les balises sont interprétées de la même manière :

Si vous utilisez à la fois un fichier robots.txt et robots meta balises

Si les instructions robots.txt et meta-balises d’une page sont en conflit, Googlebot suit le plus restrictif. Plus précisément: Si vous bloquez une page avec robots.txt, Googlebot ne l’explorera jamais et ne lira jamais

• meta
  balises sur la page. Si vous autorisez une page avec robots.txt mais empêchez son indexation à l’aide d’un
• meta balise, Googlebot
accédera à la page, lire le meta balise, et par la suite ne l'indexe pas. Valeurs de contenu de méta robots valides

Googlebot interprète ce qui suit

robots meta valeurs des balises : noindex

• : empêche l'inclusion de la page dans l'index.nofollow
• : empêche Googlebot de suivre tous les liens de la page. (Notez que c'est
est différent du niveau de liennofollow attribut, qui empêche Googlebot
en suivant un lien individuel.) noarchive
• : empêche qu'une copie en cache de cette page ne soit disponible dans la recherche
résultats.ru
• nosnippet: empêche une description d’apparaître sous la page dans les résultats de recherche, ainsi que la mise en cache de la page.
• noodp: empêche la description
  Open Directory Project de la page d’être utilisée dans la description qui apparaît sous la page dans les résultats de recherche.
• none: équivalent à noindex, nofollow.

Un mot sur la valeur du contenu none

Tel que défini par
robotstxt.org, la directive suivante signifie noindex, nofollow.

Cependant, certains webmasters utilisent cette balise pour indiquer l’absence de restrictions pour les robots et bloquent par inadvertance tous les moteurs de recherche de leur contenu.