Vitesse d'indexation de GoogleBot Extrement lente

frisee
Nouveau WRInaute
 
Messages: 4
Inscription: Mar Oct 24, 2006 7:48

Vitesse d'indexation de GoogleBot Extrement lente

Message le Mar Oct 24, 2006 7:53

Bonjour,
j'ai installé robotstats sur un site client et pas de probleme, il détecte bien le passage des robots (google/msn/slurp).
Le site est assez récent et j'ai mis en place l'url rewriting dessus.
Il contient environ 10 000 pages.
Je vois dans l'outil robotstats que google est en train d'indexer mes pages, par contre il en fait a peu près 2 par minutes..... je trouve cela hyper long et ne sais pas s'il va arriver jusquau bout...
q 1. pensez vous que cette vitesse est normale ?
q 2. Google effectue déjà l'indexation puis l'active sur son site ?
Merci pour vos éclaircissements.....
Hier :

Image

En cours :
Image ...
Dernière édition par frisee le Mar Oct 24, 2006 9:08, édité 1 fois.


dadovb
WRInaute accro
WRInaute accro
 
Messages: 2035
Inscription: Mar Nov 22, 2005 9:50

Message le Mar Oct 24, 2006 8:30

Oui, patience, tu n'es pas le seul site au monde que GG est en train de crawler, il faut attendre, et pendant ce temps profites-en pour te concentrer sur autre chose et laisses les robots se débrouiller.

frisee
Nouveau WRInaute
 
Messages: 4
Inscription: Mar Oct 24, 2006 7:48

Message le Mar Oct 24, 2006 8:40

dadovb a écrit:Oui, patience, tu n'es pas le seul site au monde que GG est en train de crawler, il faut attendre, et pendant ce temps profites-en pour te concentrer sur autre chose et laisses les robots se débrouiller.

Merci je me doute ne pas être le nombril du google site à indexer en super priorité....
mais je trouvais cela extremement lent (pour 10 000 pages, il faudra environ 2 semaines.....)
++


nickargall
WRInaute accro
WRInaute accro
 
Messages: 5295
Inscription: Lun Juin 13, 2005 14:13

Message le Mar Oct 24, 2006 8:53

Moi je trouve ça rapide dans ton cas, comparé au rythme avec lequel GG va voir mes pages ! :)


dadovb
WRInaute accro
WRInaute accro
 
Messages: 2035
Inscription: Mar Nov 22, 2005 9:50

Message le Mar Oct 24, 2006 8:59

Oui, s'il t'indexe effectivement 10000 pages en deux semaines, tu pourras te considérer comme un privilégié.

jibi
WRInaute impliqué
WRInaute impliqué
 
Messages: 315
Inscription: Lun Aoû 18, 2003 21:45

Message le Mar Oct 24, 2006 9:03

Rester zen, y que ça.
Google a mis 1 mois pour m'indexer la première page d'un site mis en ligne en août 2006.


Kilroy
WRInaute discret
WRInaute discret
 
Messages: 72
Inscription: Jeu Mar 02, 2006 5:40

Message le Mar Oct 24, 2006 9:25

Pour suivre plus précisément l'indexation tu peux essayer d'utiliser Google sitemap.
Google à récemment ajouté un indicateur qui montre la vitesse d'exploration du site et surtout qui en donne l'historique.

Ca te permettra de voir quelles conséquences peuvent avoir les actions que tu entreprends pour améliorer les choses.

frisee
Nouveau WRInaute
 
Messages: 4
Inscription: Mar Oct 24, 2006 7:48

Message le Mar Oct 24, 2006 9:38

Kilroy a écrit:Pour suivre plus précisément l'indexation tu peux essayer d'utiliser Google sitemap.
Google à récemment ajouté un indicateur qui montre la vitesse d'exploration du site et surtout qui en donne l'historique.

Ca te permettra de voir quelles conséquences peuvent avoir les actions que tu entreprends pour améliorer les choses.


merci,
j'avais vu ça mais apparemment ça doit pas être à jour car les chiffres ne correspondent pas.. (maxi 37/jour alors qu'il en a fait 1000) :
Image

frisee
Nouveau WRInaute
 
Messages: 4
Inscription: Mar Oct 24, 2006 7:48

Message le Mar Oct 24, 2006 9:52

Ce que je ne comprends pas c'est que sur d'autres sites google index 10 fois plus vite....
par exemple :
http://www.midipresse.fr/fr/robotstats/index.php


dadovb
WRInaute accro
WRInaute accro
 
Messages: 2035
Inscription: Mar Nov 22, 2005 9:50

Message le Mar Oct 24, 2006 9:54

PageRank, ancienneté, fréquence de mise à jour... De nombreux paramètres décide Google à crawler et à indexer plus ou moins souvent.


oli004
WRInaute accro
WRInaute accro
 
Messages: 2162
Inscription: Mer Jan 05, 2005 23:53

Message le Mar Oct 24, 2006 10:05

Je pense que le comportement du site lors de la prime fraicheur compte pour beaucoup dans la fréquentation des bots par la suite.

J'entends par la, que si le site répond à de nombreuses requêtes rapidement, il y a de forte probabilités que ce site sera crawlé plus frequement une fois la prime fraicheur passée.

C'est tout au moins ce que j'ai pu constater sur quelques sites. J'en ai certains par exemple qui ne voient ggbot que deux ou trois fois par mois avec un PR plus important qu'un autre site qui lui se voit crawlé plus souvent.

Je précise qu'ils sont exactement la même structure.


pcamliti
WRInaute passionné
WRInaute passionné
 
Messages: 680
Inscription: Ven Mar 09, 2007 14:38

Message le Mar Juil 17, 2007 10:26

Le crawlage est il influencé par la structure du site ?
Le sitemaps est il un atout important ?


Leonick
WRInaute accro
WRInaute accro
 
Messages: 12164
Inscription: Dim Aoû 08, 2004 20:24

Message le Mar Juil 17, 2007 13:18

pcamliti a écrit:Le crawlage est il influencé par la structure du site ?
on ne le sait pas, visiblement non
pcamliti a écrit:Le sitemaps est il un atout important ?
absolument pas


Lectures recommandées sur ce thème :

Consultez la description détaillée des produits ou services de Google suivants : Googlebot

  • Déterminer l'âge d'un site
    Cet outil vous permet de connaître une estimation de l'ancienneté d'un site : il fournit la date à laquelle Google l'a indexé la première fois (et la même chose pour archive.org).


Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités