Un nuevo user-agent de Googlebot para rastrear contenido de smartphones

Jueves, 23 de enero de 2014

A lo largo de los años, Google ha utilizado diferentes rastreadores para rastrear e indexar contenido para teléfonos móviles básicos y smartphones. Todos estos rastreadores específicos para móviles se han denominado Googlebot-Mobile. Sin embargo, los teléfonos básicos y los smartphones tienen capacidades de dispositivos considerablemente diferentes, y hemos visto casos en los que un webmaster bloqueaba sin saberlo el rastreo o la indexación de smartphones cuando en realidad quería bloquear solo el de los teléfonos básicos. Esta ambigüedad hacía imposible que Google indexara el contenido para smartphones de algunos sitios o que reconociera que estos sitios están optimizados para smartphones.

Un nuevo Googlebot para smartphones

Para aclarar la situación y dar a los webmasters un mayor control, retiraremos “Googlebot-Mobile” para smartphones como user-agent a partir de 3-4 semanas. A partir de entonces, el user-agent para smartphones se identificará simplemente como “Googlebot”, pero seguirá apareciendo en
móvil en otra parte de la user-agent cadena. Aquí están los
nuevos y antiguos user-agents:

El nuevo Googlebot para smartphones user-agent

:

(actualizado en agosto de 2015)

El Googlebot-Mobile para smartphones user-agent que retiraremos pronto:

Este cambio afecta solo a Googlebot-Mobile para smartphones. El user-agent del Googlebot regular no cambia, y los otros dos rastreadores de Googlebot-Mobile continuarán haciendo referencia a los teléfonos básicos en sus user-agent cadenas; como referencia, estos son:

Googlebot regular user-agent:

Los dos user-agents de Googlebot-Mobile para teléfonos básicos:

Puede probar su sitio utilizando la
función Explorar como Google en Herramientas para webmasters,
y puede ver una lista completa de nuestros
rastreadores existentes en el Centro de ayuda.

Rastreo e indexación

Tenga en cuenta esta implicación importante de la user-agent actualización: El nuevo
rastreador de Googlebot para smartphones seguirá las reglas de robots.txt, robots meta tag y encabezado HTTP para Googlebot en lugar de Googlebot-Mobile. Por ejemplo, cuando se implemente el nuevo rastreador, esta regla de robots.txt bloqueará todo el rastreo del nuevo Googlebot para smartphones user-agent, y también del regular
Googlebot:

Esta regla de robots.txt bloqueará el rastreo por parte de los rastreadores de teléfonos básicos de Google:

Según nuestros análisis internos, esta actualización afecta a menos del 0,001% de las URL al tiempo que ofrece a los webmasters un mayor control sobre el rastreo y la indexación de su contenido. Como siempre, si tiene alguna pregunta, puede:

• Leer nuestras
  recomendaciones para crear sitios optimizados para smartphones
• Obtener más información sobre
  cómo controlar el rastreo e indexación de Googlebot
• Preguntar en nuestros
  foros de ayuda para webmasters
  o visitar uno de nuestros
  hangouts de horas de oficina de Webmaster Central.

Publicado por Zhijian He, ingeniero de búsqueda de smartphones