16800 pages en 15 minutes

[Jean-Yves Willmann]

Bonjour à tous,

Le 25 février 2008, un "visiteur" (robot) a "vu" (chargé) plus de 16000 pages de mon site (qui n'en compte que 200) entre 1h15 et 1h30 du matin. Il s'agit en fait surtout de deux (types de) pages qui ont été chargées respectivement :
- 7809 fois pour la page /forum/login.php
- 7346 fois pour (les déclinaisons possibles de) la page /forum/posting.php
...avec un "trafic" total de près de 80 Mo en ¼ d'heure, essentiellement pour ces deux (types de) URL.

Sur mes statistiques brutes, bébête s'appelle : laf31-6-82-241-3-118.fbx.proxad.net
Qu'est-ce ? Malveillance ? (Mon robots.txt "interdit" /forum/posting.php) Ou dysfonctionnement ponctuel ?

Voilà un très court extrait des résultats bruts du 25 février :

laf31-6-82-241-3-118.fbx.proxad.net www.-------.fr - [25/Feb/2008:01:26:16 +0100] "GET /forum/login.php?redirect=posting.php&mode=quote&p=22 HTTP/1.1" 200 7621 "http://www.-------.fr/forum/viewtopic.php?t=7&view=previous" "WebCopier v4.2"
laf31-6-82-241-3-118.fbx.proxad.net www.-------.fr - [25/Feb/2008:01:26:16 +0100] "GET /forum/login.php?redirect=posting.php&mode=quote&p=24 HTTP/1.1" 200 7628 "http://www.-------.fr/forum/viewtopic.php?t=7&view=previous" "WebCopier v4.2"
laf31-6-82-241-3-118.fbx.proxad.net www.-------.fr - [25/Feb/2008:01:26:16 +0100] "GET /forum/posting.php?mode=reply&t=7 HTTP/1.1" 302 5 "http://www.-------.fr/forum/viewtopic.php?t=7&start=0&postdays=0&postorder=asc&highlight=" "WebCopier v4.2"
laf31-6-82-241-3-118.fbx.proxad.net www.-------.fr - [25/Feb/2008:01:26:16 +0100] "GET /forum/login.php?redirect=posting.php&mode=reply&t=7 HTTP/1.1" 200 7662 "http://www.-------.fr/forum/viewtopic.php?t=7&start=0&postdays=0&postorder=asc&highlight=" "WebCopier v4.2"
laf31-6-82-241-3-118.fbx.proxad.net www.-------.fr - [25/Feb/2008:01:26:16 +0100] "GET /forum/posting.php?mode=quote&p=7 HTTP/1.1" 302 5 "http://www.-------.fr/forum/login.php?redirect=posting.php&mode=quote&p=7" "WebCopier v4.2"
laf31-6-82-241-3-118.fbx.proxad.net www.-------.fr - [25/Feb/2008:01:26:16 +0100] "GET /forum/posting.php?mode=quote&p=23 HTTP/1.1" 302 5 "http://www.-------.fr/forum/viewtopic.php?p=23" "WebCopier v4.2"
laf31-6-82-241-3-118.fbx.proxad.net www.-------.fr - [25/Feb/2008:01:26:16 +0100] "GET /forum/login.php?redirect=posting.php&mode=quote&p=7 HTTP/1.1" 200 8236 "http://www.-------.fr/forum/login.php?redirect=posting.php&mode=quote&p=7" "WebCopier v4.2"
laf31-6-82-241-3-118.fbx.proxad.net www.-------.fr - [25/Feb/2008:01:26:16 +0100] "GET /forum/login.php?redirect=posting.php&mode=quote&p=23 HTTP/1.1" 200 7509 "http://www.-------.fr/forum/viewtopic.php?p=23" "WebCopier v4.2"

Cela a donc duré 15 minutes, mais après tout, pourquoi pas 15 jours la prochaine fois ?! Avec un gros rachat de trafic en perspective, voire un blocage du site ?... Je ne crois pas trop à un tel scénario, mais de manière générale, existe-t-il un moyen de bloquer un robot qui tourne en rond ?

Jean-yves

[Vap]

Tu peux bloquer l'ip dans ton .htaccess (si tu es en hébergement Linux).

Tu met quelquechose comme ça:

Code: Tout sélectionner

Order Deny, Allow
Deny from xxx.xxxx.xxxx.xxx


Tu peux aussi utiliser le nom du domaine:

Code: Tout sélectionner

Order Deny, Allow
Deny from proxad.net


Ou un sous domaine :

Code: Tout sélectionner

Order Deny, Allow
Deny from fbx.proxad.net


[Jean-Yves Willmann]

Merci pour ta réponse.

"Hébergement Linux" ?
Chez OVH, c'est Linux ?

Si ce n'est pas Linux, je peux quand même faire ce que tu proposes avec le .htaccess ?

[seebz]

.htaccess, c'est apache.

donc même si tu as apache sous windows, ca devrait aussi marcher

[Jean-Yves Willmann]

D'accord, j'essaierai.

Merci à vous deux.

[darkjukka]

Tu peux aussi utiliser le nom du domaine:

Code: Tout sélectionner

Order Deny, Allow
Deny from proxad.net


Ou un sous domaine :

Code: Tout sélectionner

Order Deny, Allow
Deny from fbx.proxad.net


Oui bien sur, et tout les freenautes sont refusés sur son site

Ca c'est l'IP d'un particulier abonné chez Free

[forummp3]

vu les pages demandé, c'est une tentative de "force brut" pour trouver surement le mdp de quelqu'un en utilisant automatiquement pleins de mot de passe via un robot.

[ecocentric]

C'est un gars de Toulouse, si ça peut t'aider.

[Vap]

.htaccess, c'est apache.

donc même si tu as apache sous windows, ca devrait aussi marcher

Tu en connais beaucoup d'hébergeurs qui offrent Apache sur Windows, au lieu de IIS?

[Vap]

Tu peux aussi utiliser le nom du domaine:

Code: Tout sélectionner

Order Deny, Allow
Deny from proxad.net


Ou un sous domaine :

Code: Tout sélectionner

Order Deny, Allow
Deny from fbx.proxad.net


Oui bien sur, et tout les freenautes sont refusés sur son site

Ca c'est l'IP d'un particulier abonné chez Free

Cites moi en entier tant qu'à faire. Je donne toutes les possibilités, car je ne sais pas laquelle est la bonne dans son cas...

[alliax]

WebCopier v4.2 apparemment c'est un navigateur offline, donc en premier il doit te prendre toutes tes pages et les sauver sur le disque dur du gars, le logiciel doit pas etre au point :
http://www.maximumsoft.com

A chaque page de ton forum il y a un lien vers post a message avec une url différente puisqu'il y a dans l'url lapage sur laquelle l'utilisateur devra revenir apres s'etre loggué (c la page post a message)
bref le logiciel doit pas seprendre la tete a comprendre phpbb, s'il voit une url qu'il n'a pas encore rappatrié sur le disque dur du gars, il l'a télécharge et voila, si le webmaster est pas content c'est pareil il avait qu'à bloquer tous les aspirateurs web du monde.

[darkjukka]

Cites moi en entier tant qu'à faire. Je donne toutes les possibilités, car je ne sais pas laquelle est la bonne dans son cas...

Non non, je cite juste les conneries pour dire de ne surtout pas faire ça car il perdrait automatique pas mal de visiteurs.

EDIT : Par ailleurs, quand on propose des solutions faut s'arranger pour qu'elles soient viables quand même

[Jean-Yves Willmann]

Bon, ne nous fâchons pas !

Pour l'instant je ne fais rien, j'attends de voir. J'ai remarqué que fbx.proxad.net revient de temps en temps de façon normale. Donc pour l'instant j'opte pour un dysfonctionnement ponctuel.

J'essaie d'écouter et de comprendre tout le monde. C'est sympa d'avoir autant de réponses. S'il y a d'autres avis encore, je suis preneur !

[darkjukka]

Il est normal que fbx.proxad.net revienne régulièrement puisque tous les freenautes ont un hostname qui se termine par cela,si c'est ton www il suffis que je clique dessus pour qu'il y en ai un nouveau

[Vap]

Cites moi en entier tant qu'à faire. Je donne toutes les possibilités, car je ne sais pas laquelle est la bonne dans son cas...

Non non, je cite juste les conneries pour dire de ne surtout pas faire ça car il perdrait automatique pas mal de visiteurs.

EDIT : Par ailleurs, quand on propose des solutions faut s'arranger pour qu'elles soient viables quand même

C'est pas une connerie d'interdire les freenautes, ilLs croient que tout est gratuit de toutes façon!