crawler?

[tophus]

Bonjour, je n'y connais pas grand chose en référencement que veut dire "crawler des pages"?

[spidetra]

crawler : récupérer des urls sur le web et suivre les liens hypertextes présents dans ses documents ( html, xml ou autres ).

C'est la première phase du travail d'un moteur de recherche : parcourir le web.

2° phase : indexer :
Transformer les pages qui ont été crawlées in "inverted index" ( un index inversé ).
D'une manière très simple : l'index inversé est l'équivalent de l'index que tu as la fin d'un livre. A chaque mot correspond un ensemble de page.