Запрос на удаление контента из нашего индекса

Вторник, 17 апреля 2007 г.

Как владелец сайта, вы контролируете, какой контент вашего сайта индексируется в поисковых системах. Самый простой способ сообщить поисковым системам, какой контент вы не хотите индексировать, — использовать
файл robots.txt или robots meta тег. Но иногда вам нужно удалить контент, который уже был проиндексирован. Какой лучший способ сделать это?

Как всегда, ответ начинается так: это зависит от типа контента, который вы хотите удалить. Наш справочный центр для веб-мастеров
предоставляет подробную информацию
о каждой ситуации. Как только мы повторно просканируем эту страницу, мы автоматически удалим контент из нашего индекса. Но если вы хотите ускорить удаление, а не ждать следующего сканирования, сделать это стало еще проще.

Для сайтов, права владения которыми вы подтвердили в своем аккаунте
Webmaster Tools
теперь вы увидите новый вариант на вкладке «Диагностика» под названием «Удаление URL». Для начала просто нажмите на ссылку URL Removals , а затем на New Removal Request. Выберите вариант, который соответствует типу удаления, которое вы хотите выполнить.

Individual URLs

Выберите вариант Individual URLs если вы хотите удалить URL или изображение. Чтобы URL имел право на удаление, должно выполняться одно из следующих условий:

• URL должен возвращать код состояния
  404 или 410
• URL должен быть заблокирован файлом
  robots.txt.
• сайта. URL должен быть заблокирован тегом
  robots meta tag.

. Как только URL будет готов к удалению, введите его и укажите, появляется ли он в результатах нашего веб-поиска или поиска по картинкам. Затем нажмите Add. Вы можете добавить до 100 URL-адресов в одном запросе. После того как вы добавили все URL-адреса, которые хотите удалить, нажмите
Submit Removal Request.

A directory

Выберите этот вариант, если хотите удалить все файлы и папки внутри определенного каталога на вашем сайте. Например, если вы запросите удаление https://www.example.com/myfolder, это приведет к удалению всех URL-адресов, начинающихся с этого пути, например:

• https://www.example.com/myfolder
• https://www.example.com/myfolder/page1.html
• https://www.example.com/myfolder/images/image.jpg

Чтобы каталог имел право на удаление, вы должны заблокировать его с помощью файла robots.txt. Например, для примера выше, https://www.example.com/robots.txt может содержать следующее:

Your entire site

Выберите этот вариант только в том случае, если вы хотите удалить весь свой сайт из индекса Google. Этот параметр удалит все подкаталоги и файлы. Не используйте этот параметр для удаления непредпочтительной версии URL-адресов вашего сайта из индексации. Например, если вы хотите, чтобы все ваши URL-адреса индексировались с использованием версии www, не используйте этот инструмент для запроса удаления версии без www. Вместо этого укажите версию, которую вы хотите проиндексировать, с помощью инструмента Preferred domain tool
(и сделайте
301 redirect
на предпочтительную версию, если это возможно). Чтобы использовать этот вариант, вы должны
заблокировать сайт с помощью файла robots.txt.

Cached copies

Выберите этот вариант, чтобы удалить кэшированные копии страниц из нашего индекса. У вас есть два варианта сделать страницы доступными для удаления из кэша.

Использование мета noarchive тега и запрос ускоренного удаления

Если вы вообще не хотите, чтобы страница кэшировалась, вы можете добавить
meta noarchive тег
на страницу, а затем запросить ускоренное удаление кэша с помощью этого инструмента. Запросив удаление с помощью этого инструмента, мы немедленно удалим кэшированную копию, а добавив мета
noarchive тег , мы никогда не будем включать кэшированную версию. (Если вы передумаете позже, вы можете удалить мета noarchive

тег.)

Изменение содержимого страницы

Если вы хотите удалить кэшированную версию страницы, потому что она содержала контент, который вы удалили и не хотите индексировать, вы можете запросить удаление кэша здесь. Мы проверим, отличается ли содержимое живой страницы от кэшированной версии, и если да, то удалим кэшированную версию. Мы автоматически сделаем последнюю кэшированную версию страницы доступной снова через шесть месяцев (и к этому моменту мы, скорее всего, повторно просканируем страницу, и кэшированная версия будет отражать самый свежий контент) или, если вы увидите, что мы просканировали страницу раньше, вы можете запросить повторное включение кэшированной версии раньше с помощью этого инструмента.

Проверка статуса запросов на удаление

Запросы на удаление отображаются как находящиеся на рассмотрении до тех пор, пока они не будут обработаны, после чего статус меняется на «Отклонено» или «Удалено». Как правило, запрос отклоняется, если он не соответствует критериям приемлемости для удаления.

Повторное включение контента Если запрос выполнен успешно, он появляется на вкладке «Удаленный контент», и вы можете вернуть его в любой момент, просто удалив блокировку robots.txt или robots meta тега и нажавReinclude 404 . В противном случае мы исключим контент на шесть месяцев. По истечении этого шестимесячного периода, если контент все еще заблокирован или возвращает сообщение о состоянии 410 илиной статус и мы повторно просканировали страницу, она не будет повторно включена в наш индекс. Однако, если страница доступна для наших сканеров по истечении этого шестимесячного периода, мы снова включим ее в наш индекс.

Запрос на удаление контента, который вам не принадлежит

Но что, если вы хотите запросить удаление контента, расположенного на сайте, которым вы не владеете?
Теперь это стало еще проще. Наш новый
Инструмент запроса на удаление веб-страниц
пошагово проводит вас через процесс для каждого типа запроса на удаление.

Поскольку Google индексирует веб и не контролирует содержимое веб-страниц, мы обычно не можем удалить результаты из нашего индекса, пока веб-мастер не заблокировал или не изменил контент, либо не удалил страницу. Если вы хотите удалить контент, вы можете поработать с владельцем сайта для этого, а затем использовать этот инструмент для ускорения удаления из результатов нашего поиска.

Если вы обнаружили результаты поиска, содержащие определенные типы личной информации, вы можете запросить удаление, даже если вам не удалось связаться с владельцем сайта. Для такого типа удаления укажите свой адрес электронной почты, чтобы мы могли работать с вами напрямую.

Если вы обнаружили результаты поиска, которые не должны отображаться при включенном SafeSearch, вы также можете сообщить нам об этом с помощью этого инструмента.

Вы можете проверить статус находящихся на рассмотрении запросов, и, как и в версии, доступной в Webmaster Tools, статус изменится на «Удалено» или «Отклонено» после обработки. Как правило, запрос отклоняется, если он не соответствует критериям приемлемости. Для запросов, связанных с личной информацией, вы не увидите статус здесь, а вместо этого получите электронное письмо с дополнительной информацией о дальнейших шагах.

Как насчет существующего инструмента удаления URL-адресов?

Если вы отправляли предыдущие запросы с помощью этого инструмента, вы все равно можете войти в систему, чтобы проверить статус этих запросов. Однако любые новые запросы отправляйте с помощью этой новой и усовершенствованной версии инструмента.