Structure du site

Le robot trouve les pages en suivant les liens. Yandex énonce la conséquence sans l’atténuer : un document sans liens pointant vers lui ne sera jamais découvert et sera ignoré dans la recherche. La structure n’est donc pas une question esthétique.

Les six règles

1. Maintenez une structure de liens claire. Chaque document appartient à une section et doit être accessible via un <a href> lien réel. Yandex ajoute un fait qui mérite d’être pris en compte lors de la planification : le temps d’indexation dépend en partie de la profondeur d’imbrication — plus une page est profonde, plus elle peut mettre de temps à être incluse. La plupart des visiteurs entrent également par la page d’accueil, car un domaine est plus facile à retenir qu’une URL interne.
2. Utilisez un plan du site sur les grands projets pour aider le robot à trouver et analyser les documents.
3. Restreignez l’indexation des pages techniques. Doublons, résultats de recherche interne, pages de statistiques — Yandex explique exactement pourquoi cela est important : ces pages sont constamment ajoutées et mises à jour, donc elles sont souvent explorées tandis que les pages contenant des informations importantes passent inaperçues. C’est l’argument du budget d’exploration exprimé dans les propres mots du moteur.
4. Donnez à chaque page une URL unique et descriptive. La translittération aide le robot à déduire le sujet ; l’exemple donné montre à quel point une URL bien formée communique avant même que la page ne soit récupérée.
5. Fournissez des liens texte vers les sections, afin que le robot apprenne ce qu’elles contiennent.
6. Vérifiez les liens symboliques afin que les URLs ne puissent pas croître indéfiniment. Les pages avec des jetons répétés — example.com/vasya/vasya/vasya/ — peuvent ne pas être indexées du tout. C’est le piège classique de l’espace infini produit par des liens relatifs dans un modèle mal géré.

Le détail de l’encodage

Utilisez le même encodage pour les pages et pour les URLs cyrilliques. Lorsque le robot trouve href="/корзина" sur une page UTF-8, il stocke le lien dans cet encodage, donc la page doit être accessible via l’équivalent encodé en pourcentage. Une inadéquation ici produit des liens qui fonctionnent dans un navigateur et donnent une erreur 404 pour le robot.

Que faire avec cela

Vérifiez trois choses sur n’importe quel site : que chaque page méritant d’être indexée est accessible par un lien simple, que rien d’important ne se trouve à plus de trois ou quatre niveaux de profondeur, et que les URLs de filtre et de recherche sont exclues. Ces trois points couvrent la majeure partie de ce qui est décrit sur cette page et la majeure partie de ce qui peut mal tourner.