13 июня 2006 г.
Мы недавно обновили наш
справочный центр для веб-мастеров.
Два новых раздела, которые могут показаться вам особенно полезными:

- Использование файла robots.txt
- Понимание кодов состояния HTTP
Использование файла robots.txt
Мы добавили новый раздел справочных тем в
Как Google сканирует мой сайт
раздел. Эти темы включают
информацию о:
- Как создать файл robots.txt
- Описание каждого user-agent, который использует Google
- Как использовать сопоставление с образцом (pattern matching)
- Как часто мы повторно сканируем ваш файл robots.txt
(примерно раз в день)
Понимание кодов состояния HTTP
В этом разделе
объясняются коды состояния HTTP
, которые ваш сервер может возвращать, когда мы запрашиваем страницу вашего сайта. Мы отображаем коды состояния HTTP в нескольких местах в Google Sitemaps (например, на
странице анализа robots.txt
и на
ошибки сканирования
странице), и некоторые владельцы сайтов просили нас предоставить больше информации о том, что они означают.

Как мы это применяем
We archive Search Central announcements because client questions often trace back to a change that was announced years ago. Reading the original is faster than reconstructing it from second-hand summaries.
Связанные услуги