Au secours ! La guerre des bots a lieu chez moi

Consultez la formation à Google Analytics de WebRankInfo / Ranking Metrics


Patrice A.
Modérateur
Modérateur
 
Messages: 2413
Inscription: Ven Fév 11, 2005 19:36

Au secours ! La guerre des bots a lieu chez moi

Message le Jeu Juin 02, 2005 15:02

J'essayais désespérément d'accéder à mon site et d'utiliser le forum et le quickchat, mais le serveur n'arrêtait pas de me renvoyer des erreurs phpBB: can't connect to database, voire, encore plus fort :
Code: Tout sélectionner
SQL Error : 1053 Server shutdown in progress
:? :?

Au bout de mille et une souffrances, j'arrive à la console d'administration et qui est en ligne ?
7 membres (bon, là ça va quand même) et
TROIS Googlebot
DEUX Inktomi
et un MSNbot !!

8O du coup, ces cons-là qui se sont donné rendez-vous en même temps risquent de trouver plein de pages "phpbb error"!

Y a-t-il un moyen de limiter la violence d'aspiration des bots ? pour que les ressources restent utilisables par les autres utilisateurs du site (et donc les autres robots) ?


tom_sawyer
WRInaute accro
WRInaute accro
 
Messages: 1205
Inscription: Jeu Déc 02, 2004 12:45

Message le Jeu Juin 02, 2005 15:07

une salle d'attente pour les bots ? :lol:


spout
WRInaute accro
WRInaute accro
 
Messages: 1296
Inscription: Mer Mai 14, 2003 11:05

Message le Jeu Juin 02, 2005 16:03

AMHA c'est le risque qd on rewrite les pages en .html

J'avais vu (je sais plus où, surement sur WRI) que google indexais moins vite les pages php, asp, ... pour ne pas flooder le serveur.

Peut être avec du cache genre Turck MMCache ?

Je n'utilise pas phpBB, je ne sais pas s'il fait des mysql connect ou des pconnect?
Peut être augmenter le nombre de connexion maximum de mysql ?

En tout cas c'est bien connu, phpBB bouffe en ressources !


Patrice A.
Modérateur
Modérateur
 
Messages: 2413
Inscription: Ven Fév 11, 2005 19:36

Message le Jeu Juin 02, 2005 16:23

Non seulement j'ai pas accès au cache php mais en plus j'ai rajouté du code "fait maison" qui fait plusieurs requêtes supp par page (derniers sujets, cd du moment, minichat)... je vais devoir faire de l'optimisation parce que là ça devient invivable !!


Pouzy
WRInaute accro
WRInaute accro
 
Messages: 1305
Inscription: Mer Sep 01, 2004 19:39

Message le Jeu Juin 02, 2005 16:59

IL m'arrive relativement souvent que deux Googlebot est 5 à 8 inktomi soient en même temps chez moi :mrgreen:

c'est inktomi qui fait le plus de zèle :)


e-kiwi
Modérateur
Modérateur
 
Messages: 13848
Inscription: Mar Déc 23, 2003 9:04

Message le Jeu Juin 02, 2005 17:02

>>Je n'utilise pas phpBB, je ne sais pas s'il fait des mysql
>> connect ou des pconnect?
>> Peut être augmenter le nombre de connexion maximum de
>>mysql ?

a mon avis, il serait en dédié, il aurai déjà augmenté le max_user_connections, et en mutualisé c est pas possible

qd a pconnect() et connect(), chez la plupart des hebergeurs mutualisés, l'un est alias de l'autre :-)

Foxus
WRInaute accro
WRInaute accro
 
Messages: 1404
Inscription: Dim Jan 09, 2005 21:21

Message le Jeu Juin 02, 2005 17:47

e-kiwi a oui il ya une limite de connection sur ton compte en mutua ?


achtungbaby
WRInaute accro
WRInaute accro
 
Messages: 4057
Inscription: Lun Juin 14, 2004 12:37

Message le Jeu Juin 02, 2005 17:50

ça arrive souvent qu'il y ait inktomi et google en même temps, mais 6 bots qui mettent à plat phpBB ça me parait étonnant. C'est pas énorme.

J'ai déjà eu 340 bots simultanés sur le forum (record d'audience d'ailleur), et ça n'a rien cassé.

Il est pas rare qu'il y ai 10 bots sur le forum, et je n'ai pas de soucis particulier. Ton probleme ne vient pas de la.

cedfr
WRInaute accro
WRInaute accro
 
Messages: 1314
Inscription: Jeu Juin 24, 2004 10:27

Message le Jeu Juin 02, 2005 18:06

achtungbaby a écrit:ça arrive souvent qu'il y ait inktomi et google en même temps, mais 6 bots qui mettent à plat phpBB ça me parait étonnant. C'est pas énorme.


+1 :lol:
Le problème est qu'un robot vient quand il veux et pas en fonction de tes disponibilités :?


Patrice A.
Modérateur
Modérateur
 
Messages: 2413
Inscription: Ven Fév 11, 2005 19:36

Message le Jeu Juin 02, 2005 20:24

Si le problème ne vient pas de là alors c'est OVH qui fait le boulet sur le serveur de la base de données :(


gorgu
WRInaute impliqué
WRInaute impliqué
 
Messages: 347
Inscription: Mer Mar 23, 2005 2:36

Message le Jeu Juin 02, 2005 23:19

inktomi vous envoi du monde?


Formation recommandée sur ce thème :

Formation Google Analytics : en 2 jours, apprenez comment exploiter l'essentiel des possibilités de l'outil de mesure d'audience de Google. Formation animée par Julien Coquet, expert certifié officiellement par Google Analytics.

Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.

Lectures recommandées sur ce thème :



Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 1 invité