Impossible de bloquer scoutjet :/

le Jeu Oct 02, 2008 12:16

Bonjour,

j'ai énormément de visites depuis scoutjet.com et j'en ai tellement marre que je veux mettre une forbidden sur ces visites, peut-être que ça s'arrétera..

j'ai donc mis:

Code: Tout sélectionner: Order allow,deny allow from all deny from h-180-92.scoutjet.com deny from scoutjet.com deny from .scoutjet.com deny from *.scoutjet.com

et bien j'ai toujours des:

Code: Tout sélectionner: h-180-92.scoutjet.com - - [02/Oct/2008:13:09:52 +0200] "GET /activites/ HTTP/1.1" 200 4477 "-" "Mozilla/5.0 (compatible; ScoutJet; +http://www.scoutjet.com/)"

pourquoi? comment se fait-il que mon htaccess ne le bloque pas? mon htacces est pourtant bien accessible..

J'utilise par ailleurs iptables, possible de le bloquer aussi comme ça? Si oui, avec quelle règle?

++

le Jeu Oct 02, 2008 13:11

Une question toute bête...

Ces incessantes requêtes écroulent-elles ta bande passante ?
Non ?
Alors laisse le faire...

le Jeu Oct 02, 2008 13:13

Bloque les adresses IP que tu trouveras sur leur page : http://www.scoutjet.com/

le Jeu Oct 02, 2008 14:13

un petit robots.txt est mieux comme indiqué sur le site :

ScoutJet a écrit:ScoutJet obeys robots.txt

You can prevent ScoutJet from indexing all or part of your site by including the following lines in your -http://www.yoursite.com/robots.txt file:

Code: Tout sélectionner: User-agent: ScoutJet Disallow: /

le Dim Nov 02, 2008 15:28

Merci, c'était ça en effet,

je rencontre cependant d'autres problèmes avec d'autres visites:

par exemple j'ai ça dans le .htaccess:

Code: Tout sélectionner: deny from qwerty.ru deny from .qwerty.ru deny from *.qwerty.ru

et bien host-77-41-8-245.qwerty.ru arrive toujours à accéder à mon site, pourquoi?
il faut alors que je rajoute

Code: Tout sélectionner: deny from host-77-41-8-245.qwerty.ru

et là ça bloque...

le . et *. indique bien de bloquer toutes les adresses du domaine, non?

cela me le fait pour plus en plus de robots et autres aspis en tout genre.

++

le Dim Nov 02, 2008 15:30

Rod la Kox a écrit:Une question toute bête...

Ces incessantes requêtes écroulent-elles ta bande passante ?
Non ?
Alors laisse le faire...

oui car j'ai un serveur perso sur connexion résidentielle, et je me passerais bien de toutes ces visites inutiles.

le Dim Nov 02, 2008 15:34

salut

pourquoi bloquer ScoutJet

c'est quoi d'ailleurs ce spider?

le Dim Nov 02, 2008 15:51

webmasterdemonsite a écrit:c'est quoi d'ailleurs ce spider?

http://www.scoutjet.com/

le Dim Nov 02, 2008 16:38

pour résumer: encore un super-hyper-crawler affirmant être le plus beau et le plus fort, mais qui nous dira plus tard le résultat de son travail et son utilité. Il pourrira le trafic de nombreux serveurs avant de finalement être abandonné sans que l'on sache pourquoi. Allez on va dire que par mois il y en a 10 000 qui naissent :p

le Dim Nov 02, 2008 20:08

Rod la Kox a écrit:
webmasterdemonsite a écrit:c'est quoi d'ailleurs ce spider?

http://www.scoutjet.com/

merci, mais j'avais dejà jeté un oeil sur cette url :roll:

Impossible de bloquer scoutjet :/

Impossible de bloquer scoutjet :/

Formation recommandée sur ce thème :

Lectures recommandées sur ce thème :

Qui est en ligne