Glossaire SEO : Budget de crawl

Qu'est-ce que le budget de crawl ?

Si Google définit un certain budget d'exploration, le moteur de recherche fixe ses propres valeurs limites. Ainsi, le nombre maximal de sous-pages à explorer varie d'un site à l'autre.

 

La question est de savoir quelle est la réputation d'un domaine. Plus celle-ci est élevée, plus le budget d'exploration maximal est important. Mais le budget d'exploration ne détermine pas seulement le nombre maximal de pages à explorer. Il détermine également la fréquence d'exploration des sous-pages d'un domaine et le degré d'approfondissement d'une seule exploration.

 

 

Quels sont les facteurs qui influencent le budget d'exploration ?

Comme nous l'avons déjà expliqué, la fiabilité du domaine est un facteur déterminant pour l'importance du budget d'exploration. Mais d'autres facteurs importants entrent également en ligne de compte. En voici quelques-uns :

 

• Contenus de mauvaise qualité et pages de spam : Si Google découvre des pages avec des contenus de mauvaise qualité ou même des spams, le budget d'exploration est réduit. Dans certains cas, l'exploration peut même être complètement interrompue.

 

• Duplicate Content : pour éviter le Indexation de trop de DUPLICATE CONTENT Google prend les mesures qui s'imposent. Par conséquent, l'exploration est considérablement réduite.

 

• Hard et Soft Errors : si les pages affichent une erreur, elles n'offrent aucune valeur ajoutée aux utilisateurs. C'est pourquoi Google s'efforce de bannir de telles pages de son index. Si trop de hard ou soft messages d'erreur 404 le budget d'exploration peut être réduit.

 

• ID de session et navigation à facettes : lorsque les pages utilisent des ID de session, elles entraînent souvent des contenus dupliqués (duplicate content). Une navigation à facettes offre aux utilisateurs la possibilité de subdiviser par exemple les produits selon d'autres critères. Il est ainsi possible d'adapter entre autres la couleur et la taille. Du côté de Google, il y a ici peu de valeur ajoutée, de sorte que le budget d'exploration est réduit.

 

Quelle est l'importance du budget d'exploration pour l'optimisation des moteurs de recherche ?

Il est conseillé aux exploitants de sites web d'examiner leurs pages à intervalles réguliers. Il est ainsi possible de contrôler les robots et d'adapter le budget d'exploration en conséquence.

 

Si un domaine contient par exemple de nombreuses sous-pages avec des erreurs 404 ou un contenu de mauvaise qualité, il faut procéder à une optimisation du crawl. Si toutes les optimisations ont été effectuées, le classement peut ensuite s'améliorer.