Comment puis-je vérifier si un site est accessible aux utilisateurs et aux robots d'indexation ?

La disponibilité est la condition préalable à tout le reste. Yandex explicite la conséquence : si le robot ne peut pas accéder au site en raison d’une erreur de serveur, le site peut disparaître complètement des résultats de recherche — et pour la même raison, les visiteurs ne peuvent pas non plus y accéder.

Les trois vérifications

• Diagnostic du site (Optimisation du site Web → Diagnostic du site), avec un widget récapitulatif sur le tableau de bord. C’est ici que les problèmes de disponibilité sont signalés en premier.
• Sécurité et violations. Yandex associe directement la sécurité à la disponibilité : les sites infectés sont généralement bloqués par un logiciel antivirus dans le navigateur, et les hébergeurs désactivent souvent les sites infectés, les rendant inaccessibles aux visiteurs comme aux robots. Un incident de malware est un incident de disponibilité.
• Vérification de page (Outils → Vérifier la page), qui est le plus informatif des trois car il montre trois choses différentes à la fois.

Ce que la vérification de page vous apporte réellement

• A capture d’écran de la page telle qu’elle s’affiche sur mobile et bureau, dans l’onglet des résultats d’audit.
• The texte disponible pour le bot d’indexation, sous « version de la page dans la base de données → contenu de la page ». C’est la réponse définitive à « le robot peut-il lire cette page ».
• The code de réponse, sous informations techniques.

Yandex énonce la règle clairement : 200 OK signifie que la page est accessible aux bots et aux visiteurs ; tout autre code signifie qu’elle n’est accessible à aucun des deux et ne peut pas apparaître dans les résultats de recherche.

Comment utiliser ceci

Lorsqu’une page est absente de la recherche, vérifiez la disponibilité avant toute chose, et vérifiez-la en tant que robot plutôt que dans un navigateur. La capture d’écran et le contenu de la page stockée répondent ensemble aux deux questions qui comptent — à quoi elle ressemble, et quelle partie de celle-ci le moteur peut réellement lire — et l’écart entre les deux est là où vivent la plupart des surprises.