Среда, 24 ноября 2010 г.
Знаете ли вы, как сканер Google, Googlebot, обрабатывает противоречивые правила в вашем файле robots.txt? Знаете ли вы, как запретить индексирование PDF-файла? Знаете ли вы любимую песню Googlebot? Ответы на эти вопросы (кроме последнего :)), а также много другой информации об управлении сканированием и индексированием вашего сайта теперь доступны на
code.google.com:
Контроль сканирования и индексирования
Теперь у владельцев сайтов есть исчерпывающий ресурс, где они могут узнать о файлах robots.txt,
robots meta -тегах и X-Robots-Tag правилах HTTP-заголовков. Пожалуйста, делитесь своими комментариями, а если у вас есть вопросы, вы можете задать их в нашем
Форуме справки для вебмастеров.
Как мы это применяем
We archive Search Central announcements because client questions often trace back to a change that was announced years ago. Reading the original is faster than reconstructing it from second-hand summaries.
Связанные услуги