Le crawl qui suit la Google Dance

[PuraVida]

oui, ca continue!!
5 googlebot aujourd'hui

[Digit]

Juste un petite remarque technique sur les impacts des crawls post-GGDance :
Ceux-ci parcourent plus de page par jour qu'en temps normal, ça peut avoir un impact important sur les ressources d'un site hébergeant quelques miliers ou dizaines de miliers de pages. Voici donc quelques astuces pour réduire cette charge supplémentaire :
- utiliser une redirection 301 pour toute page de type nomdedomaine.com vers www .nomdedomaine.com Il est effectivement inutile que le bot lise deux fois la même page (de temps en temps sur le domaine, de temps en temps sur le sous-domaine www). Un thread sur le forum explique comment le faire via le fichier .htaccess
- Bien gérer ses paramètres dynamiques : si une page est du format h**p://www.domaine.com/page.php?p1=truc&p2=machin, éviter de faire des liens sur d'autres pages de la forme h**p://www.domaine.com/page.php?p2=machin&p1=truc. Cette inversion de paramètres fait que la page pourra être crawlée avec ces deux versions alors que c'est un même contenu.
L'idée est de faire crawler l'essentiel et non pas plusieurs fois la même chose, on augmente nos chances d'avoir un crawl exhaustif