Optimisation du crawl

Voir tout le glossaire
Retour a l'article

L'optimisation du crawl désigne l'ensemble des techniques qui visent à faciliter et accélérer le processus d'indexation d'un site par les moteurs de recherche. Chaque jour, les robots d'indexation (aussi appelés spiders ou bots) parcourent des milliers de pages web pour en analyser le contenu et les sauvegarder dans l'index du moteur de recherche. Ce processus est appelé " crawl ", terme anglais qui signifie littéralement " exploration ". Bien que le crawl soit réalisé de manière aléatoire, il existe plusieurs méthodes permettant aux éditeurs de sites de maîtriser l'exploration de nouvelles pages. L'optimisation du crawl consiste à accompagner et guider les robots d'indexation, de manière à leur indiquer quelle est la structure d'un site et quelles sont les modifications qu'ils doivent prendre en compte. Parmi les méthodes utilisées, l'on peut citer :

Shakez votre vocabulaire !