Journal des modifications

Cette page détaille les dernières mises à jour majeures apportées à la documentation de Google sur le crawl.

Pour recevoir les dernières mises à jour de la documentation sur le crawl, ajoutez l’URL de cette page à votre lecteur de flux, ou ajoutez directement l’URL du flux :
https://developers.google.com/crawling/docs/changelog/crawling_docs_updates.rss.

Juillet 2026

22 juillet

Mise à jour et clarification du guide du budget de crawl

Quoi: La page
Optimisez votre budget de crawl a été améliorée et clarifiée pour plus de clarté, de cohérence terminologique et de fluidité.

Pourquoi: Pour rendre la documentation plus facile à comprendre et garantir que les termes techniques (tels que limite de capacité de crawl) sont utilisés de manière cohérente dans l’ensemble.

16 juillet

Mise à jour de l’agent utilisateur NotebookLM

Quoi: L’agent utilisateur NotebookLM a été mis à jour vers Google-GeminiNotebook. Si vous avez codé en dur l’ancienne valeur dans votre code, mettez à jour la chaîne pour éviter d’éventuels bugs. Nous continuerons à prendre en charge l’ancienne valeur pour permettre une transition en douceur.

Pourquoi: NotebookLM est désormais Gemini Notebook.

14 juillet

Correction de la chaîne d’agent utilisateur pour Google-InspectionTool agent utilisateur

Quoi: Mise à jour de la chaîne d’agent utilisateur
Google-InspectionTool
.

Pourquoi: La chaîne d’agent utilisateur pour Google-InspectionTool contenait par erreur un point-virgule, ce qui ne correspondait pas à la chaîne d’agent utilisateur réelle en production. Ce problème a été corrigé dans notre documentation.

Mai 2026

4 mai

Ajout de la documentation Web Bot Auth

Quoi: Ajout d’une documentation sur la manière d’authentifier les requêtes avec Web Bot Auth.

Pourquoi: Fournir aux propriétaires de sites des instructions sur la façon de vérifier les requêtes avec Web Bot Auth pendant la phase expérimentale, car certains agents utilisateurs Google commencent à utiliser Web Bot Auth.

Mars 2026

20 mars

Ajout de l’agent utilisateur Google-Agent

Quoi: Ajout de l’ agent utilisateur Google-Agent et ajout des plages IP pour les agents déclenchés par l’utilisateur à la documentation sur la vérification des requêtes provenant des robots d’exploration et de récupération Google.

Pourquoi: L’agent utilisateur Google-Agent est en cours de déploiement au cours des prochaines semaines et sera utilisé par les agents Google hébergés sur l’infrastructure Google pour naviguer sur le Web et effectuer des actions à la demande de l’utilisateur.

3 mars

Ajout d’une page de présentation sur le crawling web de Google

Quoi: Ajout d’une nouvelle page sur le fonctionnement du crawling de Google.

Pourquoi: Sur la base des questions que nous avons reçues au fil des ans, nous avons regroupé une page de ressources contenant des informations éducatives de base sur le crawling afin de mieux mettre en valeur les différentes ressources sur le crawling disponibles pour les propriétaires de sites.

Février 2026

11 février

Mise à jour de l’emplacement des plages IP de Google pour les robots d’exploration courants, les robots d’exploration spéciaux et les récupérateurs déclenchés par l’utilisateur

Quoi: Mise à jour de l’emplacement des
plages IP de Google pour les robots d’exploration courants, les robots d’exploration spéciaux et les récupérateurs déclenchés par l’utilisateur
vers le répertoire /crawling/ipranges . L’ancien emplacement continuera de fonctionner pour le moment, mais nous vous recommandons de mettre à jour vos liens vers le nouvel emplacement.

Pourquoi: Leur emplacement précédent dans /search/apis/ipranges n’était pas l’endroit le plus logique, car ces plages IP sont utilisées par de nombreux produits Google (et pas seulement Search).

3 février

Ajout d’informations sur les limites de taille de fichier par défaut pour les robots d’exploration et de récupération de Google

Quoi: Déplacement des informations concernant les limites de taille de fichier par défaut des robots d’exploration et de récupération de Google depuis les
Documentation Googlebot
vers
la documentation sur le crawling.

Pourquoi: L’emplacement initial de ces informations n’était pas le plus logique car elles s’appliquent à tous les crawlers et fetchers de Google. Nous les avons donc déplacées vers la documentation sur l’infrastructure de crawling.

Janvier 2026

21 janvier

Ajout de Google Messages à la liste des fetchers déclenchés par l’utilisateur

Quoi: Ajout du fetcher Google Messages à la liste des fetchers déclenchés par l’utilisateur.

Pourquoi: Pour aider les propriétaires de sites à identifier le trafic provenant de Google Messages lors de la génération d’aperçus de liens pour les URL envoyées dans les messages de chat.

Décembre 2025

18 décembre

Migration de davantage de documentation vers le site de documentation sur le crawling de Google

Quoi: Migration de la documentation suivante vers
le site d’infrastructure de crawling de Google. La fonctionnalité n’a pas changé, seuls l’emplacement de la documentation et quelques modifications mineures de formulation ont été apportés pour clarifier que certaines consignes s’appliquent à la fois à Google Search et à d’autres produits Google.

• Gestion du crawling des URL de navigation à facettes
• Optimisez votre budget de crawl
• Comment les codes d’état HTTP affectent les crawlers de Google
• Déboguer les erreurs DNS et réseau

Pourquoi: Cette documentation est plus pertinente pour de nombreux produits Google qui utilisent les crawlers de Google, et pas seulement pour la Recherche.

2 décembre

Mise à jour de la page de l’agent utilisateur Google Read Aloud

Quoi: Mise à jour de
la page de l’agent utilisateur Google Read Aloud
pour fournir des détails supplémentaires sur son fonctionnement, notamment le fait qu’il utilise un rendu sans état (stateless) et qu’il doit accéder à la page pour voir les balises meta qui y sont utilisées.

Pourquoi: Nous avons reçu des commentaires via la communauté d’aide indiquant qu’obtenir plus d’informations serait utile.

Novembre 2025

20 novembre

Migration de la documentation vers le nouveau site de documentation sur le crawling de Google

Quoi: Migration de la documentation sur le crawling depuis
Google Search Central
vers un nouveau site de documentation sur le crawling de Google. Le contenu n’a pas changé,
seul l’emplacement a évolué. Les changements notables incluent :

• Aperçu des robots d’indexation et fetchers Google
• Vérifier les requêtes provenant des robots et fetchers Google
• Réduire la vitesse de crawling de Google
• Robots d’indexation Google courants
• Comment Google interprète la spécification robots.txt

Pourquoi : L’infrastructure de crawling de Google est partagée entre divers produits Google au-delà de la recherche, notamment Google Shopping, News, Gemini, AdSense, etc. Le nouveau site constitue un emplacement plus logique pour cette documentation et facilite la documentation des nouvelles fonctionnalités et des mises à jour pertinentes pour tous ces produits.

12 novembre

Ajout du Google-Pinpoint fetcher

Quoi : Nous avons ajouté le
Google-Pinpoint
fetcher à la liste des fetchers déclenchés par l’utilisateur.

Pourquoi : Le Google-Pinpoint fetcher est utilisé par l’outil de recherche Pinpoint.

3 novembre

Ajout d’un nouveau fetcher déclenché par l’utilisateur

Quoi : Suite aux retours, nous avons ajouté le
Google-CWS
fetcher à la liste des fetchers déclenchés par l’utilisateur.

Octobre 2025

15 octobre

Mise à jour de la liste des produits Google qui utilisent le service Read Aloud

Quoi : Mise à jour de la documentation sur Google Read Aloud avec une liste actualisée des produits Google qui utilisent le service Read Aloud.

Pourquoi : D’autres produits Google peuvent désormais utiliser le service Google Read Aloud.

9 octobre

Ajouté Google-NotebookLM à la liste des récupérateurs déclenchés par l’utilisateur

Quoi: Sur la base des commentaires, nous avons ajouté
Google-NotebookLM
à la liste des récupérateurs déclenchés par l’utilisateur.

Juillet 2025

1er juillet

Mise à jour de l’agent utilisateur Google Read Aloud

Quoi: Mise à jour de l’ agent utilisateur Google Read Aloud
dans les requêtes HTTP avec des versions de navigateur plus récentes.

Pourquoi: Pour s’adapter aux sites qui ne prennent pas en charge les anciennes versions de navigateur.

Avril 2025

25 avril

Mise à jour de la description du jeton de produit Google-Extended

Quoi: Sur la base des commentaires des éditeurs, nous avons mis à jour le Google-Extended
jeton de produit pour apporter plus de précision et de clarté.

Correction de la description des préférences de crawl adressées à l’ Googlebot-News agent utilisateur

Quoi: Mise à jour de la description de l’
Googlebot-News
agent utilisateur.

Pourquoi: La description indiquant comment les préférences de crawl adressées à
Googlebot-News stipulaient par erreur qu’elles affecteraient l’onglet Actualités sur Google, ce qui n’est pas le cas.