Crawl Yahoo

[JeunZ]

C'est le seul à me faire des crawl de cette façon. Hop il se déclenche et il arrive en masse, en 10 secondes il me prend 300 400 500 pages. Et il repart.


Google, msn, alexa, pompos, font ça plus discret, X pages par minute, mais yahoo ça me fait toujours ça. Je le vois directe quand il me crawl car sur mon forum je passe de 20 online à 150 voir 200 et hop ça redescend.


C'est pas géniale comme technique pour les serveurs. Meme si ça ne me dérange pas plus que ça, ça ne fait que mettre des records sur phpBB eronés. Mais bon...

[arkantos]

Code tes stats pour pas qu'il enregistre la visite des bots en les reconnaissant grâce à leurs ips.

[JeunZ]

La flemme de retoucher phpBB.

Mais le problème que je veux mettre en avant plutot c'est le fait que yahoo est plutot impulsif, et ça aucun serveur n'aime je pense. Le serveur plus on étale les visites mieux c'est.

[arkantos]

Ha bah sa... On peut rien y faire
Il t'apporte combien de visiteur par mois ?

[JeunZ]

Je ne sais pas... desolé je ne fais pas de statistiques des visites sur mes sites, je suis le webmaster le plus débile du net je sais lol.

[arkantos]

T'es surtout pas curieux !
Ho pire des cas, si Yahoo te soule, bloque lui l'accès à ton site grâce à un .htaccess
Ou redirige le vers mon site ! MDR

[JeunZ]

C'est pas parsque je connais pas mes stats que je veux pas etre referencé et visité lol. Donc je garde yahoo l'est à moi