Plan du site

Un plan du site indique aux moteurs de recherche la structure actuelle du site. Yandex prend en charge XML (recommandé, car il contient des informations supplémentaires) et TXT (une liste simple d’URL). Il ne garantit pas que les URL apparaîtront dans les résultats.

Quand en avez-vous réellement besoin

Yandex admet sans détour que ses algorithmes trouvent généralement des pages via des liens internes et externes, mais le robot peut en rater certaines. Un plan du site vaut la peine lorsque le site a de nombreuses pages, des pages sans liens de navigation, ou une structure profondément imbriquée. Un petit site bien maillé en tire peu de profit.

Les éléments XML

• loc — obligatoire, l’adresse de la page.
• lastmod — date de la dernière mise à jour.
• changefreq — la fréquence à laquelle la page change.
• priority — de 0,0 à 1,0, et Yandex explique ce qu’il fait : le robot charge les pages triées par la présence et la valeur de ce coefficient. Il ordonne le c</crawl>. Définissez-le pour les URL qui comptent vraiment, et cela ne sert à rien si chaque page est à 1,0.

Chaque élément optionnel a une taille maximale de 100 octets.

Exigences

• UTF-8; Les URL cyrilliques sont acceptées sous leur forme originale ou encodée.
• 50 000 liens maximum — répartis sur plusieurs fichiers avec un fichier d’index au-delà.
• 50 Mo non compressé.
• Seules les URL du domaine sur lequel se trouve le fichier, et le fichier doit se trouver sur ce domaine.
• Le fichier doit renvoyer 200 OK.

Les flux RSS et Atom ne sont pas pris en charge en tant que plans du site.

L’étape que les gens sautent

La procédure de Yandex commence par la définition d’URL canoniques pour les pages qui seront répertoriées. Un plan du site rempli de variantes en doublon indique au robot de crawler un travail que vous avez déjà jugé redondant. Créez ensuite le fichier, validez-leet déclarez-le dans robots.txt ou dans la console.

Pour les grands sites

Supprimez les pages que Yandex connaît déjà et conservez le fichier pour les pages nouvelles et fréquemment mises à jour, en marquant les fichiers volatils avec lastmod dans le fichier d’index. Les statistiques de crawl montrent ce qui est déjà connu, ce qui transforme le plan du site d’un inventaire en un flux de modifications.