Vérification de la réponse du serveur

La vérification de la réponse du serveur est le diagnostic le plus utilisé dans la console, car elle montre ce que le robot reçoit plutôt que ce qu’un navigateur restitue. Yandex commence par la règle qui la rend décisive : si la réponse n’est pas 200 OK, ou contient l’un des messages répertoriés, la page est exclue des résultats de recherche.

Ce qu’elle rapporte

• Le statut HTTP.
• Le statut du certificat SSL pour les sites HTTPS — avec une longue liste de pannes spécifiques : émetteur introuvable, signature invalide ou indéchiffrable, certificat pas encore actif, expiré, autosigné et non sécurisé, chaîne contenant un seul certificat non autosigné, révoqué, chaîne trop longue, type de certificat incorrect, racine non sécurisée ou sur liste noire, ou certificat déjà émis pour un autre site. Ceux-ci sont résolus auprès de l’autorité de certification ou de l’hébergeur, et non sur le site.
• Messages de diagnostic couvrant les pannes courantes.

Les messages à connaître

• Échec du chargement du document / échec de la connexion. Trois causes : le robot bloqué sur le serveur (vérifiez le blocage IP), une erreur DNS ou un délai d’attente — la réponse doit arriver dans les 3 secondes.
• noindex la balise désactive l’indexation, ou indexation non autorisée dans robots.txt.
• Document trop volumineux — la limite de 10 Mo.
• Format non pris en charge — HTML plus PDF, DOC/DOCX, XLS/XLSX, PPT/PPTX, ODS/ODP/ODT/ODG, RTF, TXT et SWF.
• Langue non reconnue, ou le document ne contient aucun texte.
• Le contenu de la page est absent — vérifiez l’en-tête HTTP, car Content-length: 0 rend la page non indexable, et la taille déclarée doit correspondre au contenu réel.

Comment l’utiliser correctement

Sélectionnez le robot spécifique — le menu déroulant contient les principaux agents, et ne tester que celui par défaut masque le blocage spécifique aux mobiles. Utilisez le champ If-Modified-Since pour confirmer les réponses conditionnelles : la véritable date de modification de la page doit renvoyer 200, toute autre date 304.

La réserve formulée par Yandex lui-même

L’outil effectue des requêtes à partir d’une IP différente de celle du robot, de sorte que son résultat peut différer de ce que le robot reçoit réellement. En cas de désaccord entre les deux, le journal du serveur fait foi.