Usando la etiqueta meta robots

martes, 6 de marzo de 2007

Recientemente, Danny Sullivan planteó buenas preguntas sobre cómo
motores de búsqueda manejar meta etiquetas.
Aquí hay algunas respuestas sobre cómo manejamos estas etiquetas en Google.

Múltiples valores de contenido

Le recomendamos que coloque todos los valores de contenido en un meta etiqueta. esto mantiene el meta etiquetas fáciles de
leer y reduce la posibilidad de conflictos. Por ejemplo:

Si la página contiene varios meta etiquetas del mismo tipo, agregaremos los valores de contenido.
Por ejemplo, interpretaremos

de la misma manera que:

Si los valores de contenido entran en conflicto, utilizaremos el más restrictivo. Entonces, si la página tiene estos meta etiquetas:

obedeceremos noindex valor.

Valores de contenido innecesarios

De forma predeterminada, Googlebot indexará una página y seguirá los enlaces a ella. Así que no hay necesidad de etiquetar páginas. index o follow.

Dirigiendo un robots meta etiqueta específicamente en Googlebot

Para proporcionar instrucciones para todos los motores de búsqueda, configure el meta nombre en robots. A
Para proporcionar instrucciones solo para Googlebot, configure el meta nombre en Googlebot. Si tú quieres
para proporcionar diferentes instrucciones para diferentes motores de búsqueda (por ejemplo, si desea uno
motor de búsqueda para indexar una página, pero no otro), es mejor usar un específico meta etiqueta para cada motor de búsqueda en lugar de usar una genérica robots meta etiqueta combinada con una específica. usted puede encontrar lista de bots en robotstxt.org.

Mayúsculas, minúsculas y espacios

Googlebot entiende cualquier combinación de minúsculas y mayúsculas. Entonces cada uno de estos meta las etiquetas se interpretan exactamente de la misma manera:

Si tiene varios valores de contenido, debe colocar una coma entre ellos, pero no importa
si también incluye espacios. Así que los siguientes meta etiquetas se interpretan de la misma manera:

Si usa tanto un archivo robots.txt como robots meta etiquetas

Si las instrucciones robots.txt y metaetiqueta para una página entran en conflicto, Googlebot sigue la mayor parte restrictivo. Más específicamente: Si bloquea una página con robots.txt, Googlebot nunca rastreará la página y nunca leerá ninguna

• meta
  etiquetas en la página. Si permite una página con robots.txt pero evita que sea indexada usando un
• meta etiqueta, Googlebot
accederá a la página, leerá el meta etiqueta y posteriormente no la indexará. Valores de contenido de robots meta válidos

Googlebot interpreta lo siguiente

robots meta valores de etiqueta: noindex

• : evita que la página sea incluida en el índice.nofollow
• : evita que Googlebot siga cualquier enlace de la página. (Tenga en cuenta que esto
es diferente del nivel de enlacenofollow atributo, que evita que Googlebot
siguiendo un enlace individual.) noarchive
• : evita que una copia en caché de esta página esté disponible en la búsqueda
resultados.fr
• nosnippet: evita que aparezca una descripción debajo de la página en los resultados de búsqueda, así como que se almacene en caché la página.
• noodp: bloquea que la descripción del
  Open Directory Project de la página se utilice en la descripción que aparece debajo de la página en los resultados de búsqueda.
• none: equivalente a noindex, nofollow.

Una palabra sobre el valor del contenido none

Tal como lo define
robotstxt.org, la siguiente directiva significa noindex, nofollow.

Sin embargo, algunos webmasters utilizan esta etiqueta para indicar que no hay restricciones para los robots y, sin querer, bloquean a todos los motores de búsqueda de su contenido.