Pourquoi des pages sont-elles exclues de la recherche ?

Chaque page exclue comporte une raison explicite, répertoriée sous Indexing → Searchable pages → Excluded pages. Yandex est exceptionnellement transparent ici — Google ne montre rien de comparable — et la raison est le diagnostic, la liste doit donc être lue par statut plutôt que par URL.

Les raisons d’exclusion

• Faible valeur ou faible demande — l’algorithme a choisi de ne pas l’inclure. Ce n’est pas une violation.
• Erreur de téléchargement ou de traitement (3XX, 4XX, 5XX) — vérifiez avec la vérification de la réponse du serveur ; confirmez que la page est dans le sitemap et qu’aucune directive ne la bloque.
• Bloquée dans robots.txt ou par noindex — supprimez l’interdiction. Si vous ne l’avez pas ajoutée, demandez à l’hébergeur ou au registrar, et vérifiez que le domaine n’a pas expiré.
• La page redirige le robot ailleurs — confirmez que la redirection est intentionnelle.
• Doublon d’une autre page.
• Non canonique — la page pointe ailleurs avec rel="canonical". Confirmez que c’est délibéré.
• Adresse reconnue comme une autre adresse — le regroupement de miroirs l’a absorbée ; le dégroupage est une procédure distincte.
• Violations trouvées sur le site — vérifiez Sécurité et violations.

Deux questions qui reviennent à chaque audit

« La page s’ouvre bien dans mon navigateur. » Yandex donne la raison directement : les en-têtes envoyés par le robot diffèrent de ceux du navigateur, de sorte qu’une page peut fonctionner pour un navigateur et échouer pour le robot. De plus, une page exclue pour une erreur de téléchargement ne quitte la liste qu’une fois qu’elle est à nouveau accessible au robot — vérifiez la réponse du serveur, et si elle renvoie 200 OK, attendez la prochaine exploration.

« Ces pages n’existent plus. » La liste comprend des URL que le robot a atteintes mais n’a pas indexées, y compris des URL qui n’existent plus. Elles ne disparaissent que lorsqu’elles sont indisponibles pour le robot pendant un certain temps et que rien n’y fait référence, en interne ou en externe. Yandex répète ici son assurance : les pages exclues n’affectent pas la position du site.

Le schéma derrière la plupart des grandes listes d’exclusion

Yandex le nomme explicitement : produits ne différant que par la couleur, la taille ou la configuration ; pages de pagination ; pages de sélection et de comparaison de produits ; pages d’images sans texte. Des paires title et description générées automatiquement qui se dupliquent aggravent la situation. Sur un site catalogue, il s’agit généralement d’une décision de modèle, et non de milliers de problèmes distincts.

Après correction

Soumettez la page pour réindexation plutôt que d’attendre. Le robot continue de visiter les pages exclues et un algorithme spécial les réévaluera avant chaque mise à jour de l’index, de sorte qu’une page corrigée peut revenir dans un délai d’environ deux semaines.