Suppression d'URL expliquée, Partie I : URLs et répertoires

Mardi 30 mars 2010

Il y a
beaucoup de contenu sur Internet de nos jours.
À un moment donné, quelque chose peut apparaître en ligne que vous préféreriez ne pas y voir — qu’il s’agisse d’un article de blog incendiaire que vous regrettez d’avoir publié, ou de données confidentielles qui ont été exposées par accident. Dans la plupart du temps, la suppression ou la restriction de l’accès à ce contenu le fera naturellement disparaître des résultats de recherche après un certain temps. Cependant, si vous avez urgemment besoin de supprimer du contenu indésirable qui a été indexé par Google et que vous ne pouvez pas attendre qu’il disparaisse naturellement, vous pouvez utiliser notre outil de suppression d’URL pour accélérer la suppression de contenu de nos résultats de recherche tant qu’il répond à certains critères
(que nous aborderons ci-dessous).

Nous avons préparé une série d’articles de blog pour vous expliquer comment supprimer avec succès différents types de contenu et les erreurs courantes à éviter. Dans ce premier article, je vais aborder quelques scénarios de base : la suppression d’une seule URL, la suppression d’un répertoire ou d’un site entier, et la réintégration de contenu supprimé. Je recommande également vivement notre article précédent sur
la gestion des informations disponibles à votre sujet en ligne.

Suppression d’une seule URL

En général, pour que vos demandes de suppression réussissent, le propriétaire de la ou des URL en question — qu’il s’agisse de vous ou de quelqu’un d’autre — doit avoir indiqué qu’il est acceptable de supprimer ce contenu. Pour une URL individuelle, cela peut être indiqué de trois manières :

• bloquer l’exploration de la page via un
  fichier robots.txt
• bloquer l’indexation de la page via une
  noindex meta balise
• indiquer que la page n’existe plus en renvoyant un
  404 ou 410 code d’état

Avant de soumettre une demande de suppression, vous pouvez vérifier si l’URL est correctement bloquée :

• robots.txt : Vous pouvez vérifier si l’URL a été correctement refusée en utilisant les fonctionnalités
  Explorer comme Googlebot
  ou
  Tester robots.txt
  dans les Outils pour webmasters.
• noindex meta balise : Vous pouvez utiliser Explorer comme Googlebot pour vous assurer que la meta balise apparaît quelque part entre les balises <head> et </head> . Si vous souhaitez vérifier une page que vous ne pouvez pas vérifier dans les Outils pour webmasters, vous pouvez ouvrir l’URL dans un navigateur, aller dans > AffichageCode source de la page
  , et vous assurer de voir la meta balise entre les balises <head> et </head>
• 404 . 410 et code d’état :
  Vous pouvez utiliser Explorer comme Googlebot, ou des outils comme
  Live HTTP Headers ou
  web-sniffer.net
  pour vérifier si l’URL renvoie réellement le code correct. Parfois, les pages “supprimées” peuvent “404afficher
  200 ” ou “Introuvable” sur la page, mais renvoient en réalité un code d’état dans l’en-tête de la page ; il est donc bon d’utiliser un outil de vérification d’en-tête approprié pour double-vérifier.

Si du contenu indésirable a été supprimé d’une page mais que la page n’a pas été bloquée de l’une des manières ci-dessus, vous ne pourrez pas supprimer complètement cette URL de nos résultats de recherche. C’est le cas le plus fréquent lorsque vous ne possédez pas le site qui héberge ce contenu. Nous expliquons quoi faire dans cette situation dans un article ultérieur de
la partie II de notre série sur les suppressions.

Si une URL remplit l’un des critères ci-dessus, vous pouvez la supprimer en vous rendant sur
l’Outil de suppression, en entrant l’URL que vous souhaitez supprimer et en sélectionnant l’option “Le webmaster a déjà bloqué la page”. Notez que vous devez entrer l’URL où le contenu était hébergé, pas l’URL de la recherche Google où il apparaît. Par exemple, entrez
https://www.example.com/embarrassing-stuff.html pas
https://www.google.com/search?q=embarrassing+stuff.

Notre article du centre d’aide
contient plus de détails sur la façon de s’assurer que vous entrez la bonne URL. N’oubliez pas que si vous ne nous indiquez pas l’URL exacte qui vous pose problème, nous ne pourrons pas supprimer le contenu que vous aviez en tête.

Suppression d’un répertoire ou d’un site entier

Pour qu’une suppression à l’échelle d’un répertoire ou d’un site réussisse, le répertoire ou le site doit être
interdit dans le
fichier robots.txtdu site. Par exemple, pour supprimer le répertoire https://www.example.com/secret/ votre fichier robots.txt devra inclure :

Il ne suffit pas que la racine du répertoire renvoie un code d’état, car il est possible qu’un répertoire renvoie un code d’état. 404 Il ne suffit pas que la racine du répertoire renvoie un code d’état, car il est possible qu’un répertoire renvoie un code d’état. 404 mais continue de diffuser les fichiers en dessous.
L’utilisation de robots.txt pour bloquer un répertoire (ou un site entier) garantit que toutes les URL de ce répertoire (ou site) sont également bloquées. Vous pouvez tester si un répertoire a été bloqué correctement en utilisant les fonctionnalités
Explorer comme Googlebot
ou
Tester robots.txt
dans Webmaster Tools.

Seuls les propriétaires vérifiés d’un site peuvent demander la suppression d’un site entier ou d’un répertoire dans Webmaster Tools. Pour demander la suppression d’un répertoire ou d’un site, cliquez sur le site en question, puis allez dans
Configuration du site >
Accès aux robots d’exploration >
Supprimer l’URL. Si vous entrez la racine de votre site comme URL à supprimer, il vous sera demandé de confirmer que vous souhaitez supprimer l’ensemble du site. Si vous entrez un sous-répertoire, sélectionnez l’option « Supprimer le répertoire » dans le menu déroulant.

Réintégration de contenu

Vous pouvez annuler les demandes de suppression pour tout site dont vous êtes propriétaire à tout moment, y compris celles soumises par d’autres personnes. Pour ce faire, vous devez être un
propriétaire vérifié de ce site
dans Webmaster Tools. Une fois la propriété vérifiée, vous pouvez aller dans
Configuration du site >
Accès aux robots d’exploration >
Supprimer l’URL >
URL supprimées (ou > Créé par d’autres) et cliquer sur « Annuler » à côté de toute demande que vous souhaitez annuler.

Vous avez encore des questions ? Restez à l’écoute pour la suite de notre série sur la suppression de contenu des résultats de recherche de Google. Si vous ne pouvez pas attendre, beaucoup de choses ont déjà été écrites sur la suppression d’URL et le dépannage de cas individuels dans notre
Forum d’aide.
Si vous avez encore des questions après avoir lu les expériences des autres, vous pouvez poser les vôtres. Veuillez noter qu’dans la plupart des cas, il est difficile de donner des conseils pertinents sur une suppression particulière sans connaître le site ou l’URL en question. Nous vous recommandons de partager votre URL en utilisant un
service de raccourcissement d’URL
afin que l’URL qui vous préoccupe ne soit pas indexée dans le cadre de votre message ; certains services de raccourcissement vous permettront même de désactiver le raccourci plus tard, une fois votre question résolue.

Autres articles de cette série

• Partie II : Suppression et mise à jour du contenu mis en cache
• Partie III : Suppression de contenu qui ne vous appartient pas
• Partie IV : Suivi des demandes, quoi ne pas supprimer

Enfin, vous pourriez également être intéressé par la lecture de
la gestion des informations disponibles sur vous en ligne.

Publié par Susan Moskwa, Webmaster Trends Analyst