Ce document détaille comment les paramètres au niveau de la page et du texte peuvent être utilisés pour ajuster la manière dont Google présente votre contenu dans les résultats de recherche. Vous pouvez spécifier les paramètres au niveau de la page en incluant une
meta balise sur les pages HTML ou dans un en-tête HTTP. Vous pouvez spécifier les paramètres au niveau du texte avec l’attribut data-nosnippet sur les éléments HTML d’une page.
Gardez à l’esprit que ces paramètres ne peuvent être lus et suivis que si les robots d’exploration sont autorisés à accéder aux pages qui les contiennent.
La règle <meta name="robots" content="noindex"> s’applique aux robots d’exploration des moteurs de recherche. Pour bloquer les robots d’exploration autres que les moteurs de recherche, tels que AdsBot-Google, vous devrez peut-être ajouter des règles ciblant le robot spécifique (par exemple,
<meta name="AdsBot-Google" content="noindex">).
Utilisation de la balise robots meta La balise
robots meta vous permet d'utiliser une approche granulaire et spécifique à la page pour contrôler la manière dont une page HTML individuelle doit être indexée et servie aux utilisateurs dans les résultats de recherche Google. Placez la balise robots meta dans la section <head> d'une page donnée, comme ceci : Si vous utilisez un CMS, tel que Wix, WordPress ou Blogger
robots meta indique aux moteurs de recherche de ne pas afficher la page dans les résultats de recherche. La valeur de l'attribut name ( robots) spécifie que la règle s'applique à tous les robots d'exploration. L'attributname et l'attribut
content ne sont pas sensibles à la casse. Pour cibler un robot spécifique, remplacez la valeur robots de l'attribut name par le jeton d'agent utilisateur du robot que vous ciblez. Google prend en charge deux jetons d'agent utilisateur dans la balise robots
meta ; les autres valeurs sont ignorées : googlebot
: pour tous les résultats textuels.googlebot-news: pour les résultats d'actualités.Par exemple, pour indiquer spécifiquement à Google de ne pas afficher d’extrait dans ses résultats de recherche, vous pouvez spécifier
googlebot comme nom de la balise meta : Pour afficher un extrait complet dans les résultats de recherche Web de Google, mais aucun extrait dans Google News, spécifiez
googlebot-news
comme nom de la balise meta : Pour spécifier plusieurs robots d’exploration individuellement, utilisez plusieurs balises
robots meta
: Remarque :
ru
ru ru à la place.
En utilisant le X-Robots-Tag en-tête HTTP
Le X-Robots-Tag peut être utilisé comme un élément de la réponse d’en-tête HTTP pour une URL donnée. Toute règle pouvant être utilisée dans une balise robots meta peut également être spécifiée en tant que X-Robots-Tag. Voici un exemple de réponse HTTP avec un
X-Robots-Tag indiquant aux robots d’indexation de ne pas indexer une page :
Plusieurs X-Robots-Tag en-têtes peuvent être combinés dans la réponse HTTP, ou vous pouvez spécifier une liste de règles séparées par des virgules. Voici un exemple de réponse d’en-tête HTTP qui possède un noimageindex
X-Robots-Tag combiné avec un
unavailable_after X-Robots-Tag.
Le X-Robots-Tag peut éventuellement spécifier un agent utilisateur avant les règles. Par exemple, l’ensemble suivant de X-Robots-Tag en-têtes HTTP peut être utilisé pour autoriser conditionnellement l’affichage d’une page dans les résultats de recherche pour différents moteurs de recherche :
Les règles spécifiées sans agent utilisateur sont valables pour tous les robots d’indexation. L’en-tête HTTP, le nom de l’agent utilisateur et les valeurs spécifiées ne sont pas sensibles à la casse.
Règles d’indexation et de diffusion valides
Les règles suivantes, également disponibles au
format lisible par machine, peuvent être utilisées pour contrôler l’indexation et la diffusion d’un extrait avec la balise robots meta et le X-Robots-Tag. Chaque valeur représente une règle spécifique. Plusieurs règles peuvent être combinées dans une liste séparée par des virgules ou dans des balises meta séparées. Ces règles ne sont pas sensibles à la casse.
| Règles | |
|---|---|
| Il n’y a aucune restriction pour l’indexation ou la diffusion. Cette règle est la valeur par défaut et n’a aucun effet si elle est explicitement listée. |
| Ne pas afficher cette page, ce média ou cette ressource dans les résultats de recherche. Si vous ne spécifiez pas cette règle, la page, le média ou la ressource peut être indexé et affiché dans les résultats de recherche. Pour supprimer des informations de Google, suivez notre |
| Ne suivez pas les liens sur cette page. Si vous ne spécifiez pas cette règle, Google peut utiliser les liens sur la page pour découvrir ces pages liées. En savoir plus surnofollow. |
| Équivalent à noindex, nofollow. |
| Ne pas afficher d’extrait de texte ou d’aperçu vidéo dans les résultats de recherche pour cette page. Une vignette d’image statique (si disponible) peut toujours être visible lorsqu’elle offre une meilleure expérience utilisateur. Cela s’applique à toutes les formes de résultats de recherche (sur Google : recherche Web, Google Images, Discover, AI Overviews, AI Mode) et empêchera également le contenu d’être utilisé comme entrée directe pour AI Overviews et AI Mode. Si vous ne spécifiez pas cette règle, Google peut générer un extrait de texte et un aperçu vidéo basés sur les informations trouvées sur la page. Pour exclure certaines sections de votre contenu d’apparaître dans les extraits de résultats de recherche, utilisez l’ |
| Google est autorisé à indexer le contenu d’une page s’il est intégré dans une autre page via des
|
| Utilisez un maximum de [number] caractères comme extrait textuel pour ce résultat de recherche. (Notez qu’une URL peut apparaître comme plusieurs résultats de recherche au sein d’une page de résultats de recherche.) Cela n’affecte pas les aperçus d’images ou de vidéos. Cela s’applique à toutes les formes de résultats de recherche (telles que la recherche Google, Google Images, Discover, Assistant, AI Overviews, AI Mode) et limitera également la quantité de contenu pouvant être utilisée comme entrée directe pour AI Overviews et AI Mode. Cependant, cette limite ne s’applique pas dans les cas où un éditeur a accordé séparément l’autorisation d’utiliser le contenu. Par exemple, si l’éditeur fournit du contenu sous forme de données structurées sur la page ou a un accord de licence avec Google, ce paramètre n’interrompt pas ces utilisations autorisées plus spécifiques. Cette règle est ignorée si aucun [number] analysable n’est spécifié. Si vous ne spécifiez pas cette règle, Google choisira la longueur de l’extrait. Valeurs spéciales :
Exemples : Pour empêcher l’affichage d’un extrait dans les résultats de recherche : Pour autoriser l’affichage de jusqu’à 20 caractères dans l’extrait : Pour spécifier qu’il n’y a pas de limite au nombre de caractères pouvant être affichés dans l’extrait : |
| Définissez la taille maximale d’un aperçu d’image pour cette page dans les résultats de recherche. Si vous ne spécifiez pas la règle Valeurs [setting] acceptées :
Cela s’applique à toutes les formes de résultats de recherche (telles que la recherche Google, Google Images, Discover, Assistant). Cependant, cette limite ne s’applique pas dans les cas où un éditeur a accordé séparément l’autorisation d’utiliser le contenu. Par exemple, si l’éditeur fournit du contenu sous forme de données structurées sur la page (telles que les versions AMP et canoniques d’un article) ou a un accord de licence avec Google, ce paramètre n’interrompra pas ces utilisations autorisées plus spécifiques. Si vous ne souhaitez pas que Google utilise des images miniatures plus grandes lorsque leurs pages AMP et la version canonique d’un article sont affichées dans la recherche ou Discover, spécifiez une valeur Exemple : |
| Utilisez un maximum de [number] secondes comme extrait vidéo pour les vidéos sur cette page dans les résultats de recherche. Si vous ne spécifiez pas la règle Valeurs spéciales :
Cela s’applique à toutes les formes de résultats de recherche (chez Google : recherche Web, Google Images, Google Vidéos, Discover, Assistant). Cette règle est ignorée si aucun [number] analysable n’est spécifié. Exemple : |
| Ne proposez pas de traduction de cette page dans les résultats de recherche. Si vous ne spécifiez pas cette règle, Google peut fournir une traduction du lien de titre et de l’extrait d’un résultat de recherche pour les résultats qui ne sont pas dans la langue de la requête de recherche. Si l’utilisateur clique sur le lien de titre traduit, toute interaction ultérieure de l’utilisateur avec la page se fait via Google Translate, qui traduira automatiquement tous les liens suivis. |
| N’indexez pas les images sur cette page. Si vous ne spécifiez pas cette valeur, les images sur la page peuvent être indexées et affichées dans les résultats de recherche. |
| N’affichez pas cette page dans les résultats de recherche après la date/heure spécifiée. La date/heure doit être spécifiée dans un format largement adopté, y compris, mais sans s’y limiter Si vous ne spécifiez pas cette règle, cette page peut être affichée dans les résultats de recherche indéfiniment. Googlebot réduira considérablement le taux d’exploration de l’URL après la date et l’heure spécifiées. Exemple : |
Gestion des règles combinées d’indexation et de service
Vous pouvez créer une instruction multi-règles en combinant les règles de balises robots meta
avec des virgules ou en utilisant plusieurs balises meta . Voici un exemple d’une balise robots meta qui demande aux robots d’indexation de ne pas indexer la page et de ne pas explorer les liens sur la page :
Voici un exemple qui limite l’extrait de texte à 20 caractères et autorise un aperçu d’image large :
Pour les situations où plusieurs robots d’indexation sont spécifiés avec des règles différentes, le moteur de recherche utilisera la somme des règles négatives. Par exemple :
La page contenant ces balises meta sera interprétée comme ayant une règle
noindex, nofollow lorsqu’elle sera explorée par Googlebot. En utilisant le
ru data-nosnippet Attribut HTML
Vous pouvez désigner des parties textuelles d’une page HTML pour qu’elles ne soient pas utilisées comme extrait. Cela peut être fait au niveau de l’élément HTML avec l’attribut data-nosnippet HTML sur les éléments
span, divet
section . Le data-nosnippet
est considéré comme un
attribut booléen. Comme pour tous les attributs booléens, toute valeur spécifiée est ignorée. Pour garantir la lisibilité par la machine, la section HTML doit être un HTML valide et toutes les balises appropriées doivent être fermées en conséquence.
Exemples :
Google rend généralement les pages afin de les indexer, cependant le rendu n’est pas garanti. Pour cette raison, l’extraction de data-nosnippet peut se produire à la fois avant et après le rendu. Pour éviter l’incertitude liée au rendu, n’ajoutez pas ou ne supprimez pas l’attribut
data-nosnippet des nœuds existants via JavaScript. Lors de l’ajout d’éléments DOM via JavaScript, incluez l’attribut
data-nosnippet si nécessaire lors de l’ajout initial de l’élément au DOM de la page. Si des éléments personnalisés sont utilisés, enveloppez-les ou rendez-les avec des éléments
div, spanou
section si vous devez utiliser
data-nosnippet.
. Utilisation de données structurées
Robots meta les balises régissent la quantité de contenu que Google extrait automatiquement des pages Web pour l’afficher sous forme de résultats de recherche. Mais de nombreux éditeurs utilisent également des données structurées schema.org pour rendre des informations spécifiques disponibles pour la
présentation de la recherche. . Les limitations de la balise Robots meta
n'affectent pas l'utilisation de ces données structurées, à l'exception de article.description
et des valeurs description
pour les données structurées spécifiées pour d'autres œuvres créatives. Pour spécifier la longueur maximale d'un aperçu basé sur ces valeurs description
, utilisez la règle max-snippet
. Par exemple, les données structurées recipe sur une page sont éligibles pour être incluses dans le carrousel de recettes, même si l'aperçu du texte serait autrement limité. Vous pouvez limiter la longueur d'un aperçu de texte avecmax-snippet , mais cette balise robots meta
ne s’applique pas lorsque les informations sont fournies à l’aide de données structurées pour les résultats enrichis. Pour gérer l'utilisation des données structurées pour vos pages Web, modifiez les types et les valeurs des données structurées eux-mêmes, en ajoutant ou en supprimant des informations afin de ne fournir que les données que vous souhaitez rendre disponibles. Notez également que les données structurées restent utilisables pour les résultats de recherche lorsqu'elles sont déclarées dans un élément data-nosnippet
. Mise en œuvre pratique de X-Robots-Tag
. Vous pouvez ajouter le X-Robots-Tag aux réponses HTTP d’un site via les fichiers de configuration du logiciel de serveur Web de votre site. Par exemple, sur les serveurs Web basés sur Apache, vous pouvez utiliser les fichiers .htaccess et httpd.conf. L’avantage d’utiliser un
X-Robots-Tag avec les réponses HTTP est que vous pouvez spécifier des règles d’exploration qui sont appliquées globalement sur un site. La prise en charge des expressions régulières permet un haut niveau de flexibilité.
Par exemple, pour ajouter un noindex, nofollow
X-Robots-Tag à la réponse HTTP pour tous les fichiers .PDF sur un site entier, ajoutez l’extrait suivant au fichier .htaccess ou httpd.conf à la racine du site sur Apache, ou au fichier .conf du site sur NGINX.
Vous pouvez utiliser le X-Robots-Tag pour les fichiers non HTML comme les fichiers image où l’utilisation de balises robots meta en HTML n’est pas possible. Voici un exemple d’ajout de “noindex”
. X-Robots-Tag règle pour les fichiers images (.png, .jpeg, .jpg, .gif) sur l’ensemble d’un site :
Vous pouvez également définir les X-Robots-Tag en-têtes pour des fichiers statiques individuels :
Combiner les règles robots.txt avec les règles d’indexation et de service
robots meta balises et X-Robots-Tag Les en-têtes HTTP sont découverts lorsqu’une URL est explorée. Si une page est interdite d’exploration via le fichier robots.txt, aucune information sur les règles d’indexation ou de service ne sera trouvée et sera donc ignorée. Si les règles d’indexation ou de service doivent être suivies, les URL contenant ces règles ne peuvent pas être interdites d’exploration.
Comment nous l'appliquons
Robots directives are the sharpest tool in technical SEO and the easiest to misfire. We review every noindex on a site during onboarding, because inherited directives on commercially important pages are more common than clients expect.
Services associés