Crawling, indexation et classement

Les trois étapes que chaque page traverse avant de pouvoir apparaître dans les résultats.

Leçon
1/7
Temps de lecture
8 min
Sections
5
Tout au long du cours
14%

Les moteurs de recherche fonctionnent en trois étapes. Comprendre à quelle étape une page est bloquée est la manière la plus rapide de diagnostiquer pourquoi elle ne reçoit pas de trafic.

Exploration

Les robots explorent les URL en suivant les liens et en lisant les plans de site, puis demandent chaque page. Une page à laquelle personne ne fait de lien, ou une page bloquée dans robots.txt, peut ne jamais être récupérée. Les robots ont un temps limité par site, donc les serveurs lents, les URL de filtre sans fin et les chaînes de redirection gaspillent ce temps.

Indexation

Après la récupération, le moteur analyse le HTML, détermine le sujet de la page, choisit une version canonique parmi les doublons et décide de la stocker ou non. Une balise robots noindex ou un en-tête X-Robots-Tag, un statut d'erreur, ou un canonique pointant ailleurs empêche une page d'être indexée.

Classement

Lorsqu'une personne effectue une recherche, le moteur sélectionne les pages indexées correspondant à la requête et les classe. La pertinence par rapport à la requête, la qualité et la profondeur du contenu, les liens provenant d'autres sites, l'expérience de la page ainsi que la localisation et l'appareil du chercheur jouent tous un rôle.

Vérifiez votre compréhension

Une page renvoie un statut 200, est liée depuis le menu et a un canonique pointant vers une URL différente. À quelle étape est-elle probablement bloquée ?

Diagnostiquer par étape

  • Non explorée : vérifiez les liens internes, le plan de site et robots.txt.
  • Explorée mais non indexée : vérifiez le code de statut, noindex, canonique et contenu dupliqué.
  • Indexée mais non classée : vérifiez la correspondance d'intention, la profondeur du contenu, les liens et les concurrents.

Leçon 1 sur 7

Crawling, indexation et classement