Yahoo A propos d'une adresse IP inktomisearch.com

[user-198]

bonjour,
depuis quelques jours (je vois en temps réel l'adresse ip des visiteurs qui viennent sur mon site!), j'ai cette adresse ip qui vient régulièrement sur mon site. Les premières fois c'était de temps en temps. Aujourd'hui c'est depuis ce matin 3h, elle passe une minute par page et est toujours là à 8heures du matin! Ce qui m'inquiète, c'est d'abord qu'elle change à chaque minute (ça commence toujours par 66.196.7, et les 3 derniers chiffres changent constamment!) mais surtout qu'elle a accès à des fichiers qui n'ont aucun lien sur mon site! (des fichiers en attente de mises à jour, des pages en construction que j'ai tout de même uploadés de peur de les perdre! Je sais ce n'est pas très malin!) J'ai l'impression que cette adresse fouille mon site de fond en comble, même dans les recoins interdits aux visiteurs. Ce n'est pas très rassurant.
Qui auraient des explications à donner à ça? Merci d'avance.
Lone
nb : ah oui, autre chose, je crois qu"elle" s'est inscrite à ma mailing list, ce qui prouve que c'est une personne physique (avec une adresse caramail : le spécialiste des adresses bidons!)

 

[robertchabot]

par curiosité pure ,
comment établis-tu une relation entre
l'adresse ip inktomisearch.com citée dans ton sujet
et cette cette adresse ip 66.196.7, et les 3 derniers chiffres qui vient régulièrement sur ton site. ??
cordialement R.C.

 

[user-198]

bonjour,
merci de votre réponse, mais j'ai du mal avec l'info, je n'y connais pas grand chose. Je bricole et les termes me sont souvent rébarbatifs.
cette adresse ip qui commence toujours par : 66.196.7... a toujours pour origine : inktomisearch.com, je le sais par une page "reverse dns".
exemple pour cette adresse : 66.196.73.31 = j4007.inktomisearch.com
66.196.72.48 = j3138.inktomisearch.com etc....
or quand je cherche dans google par exmple, inktomisearch.com, ça n'existe pas! C'est donc une ip fantome qui se ballade sur mon site et tombe sur mes pages sans lien! Elle continue à regarder mes pages par intermittence comme si elle était en permanence sur mon site et avait ajouté chaque page de mon site dans "ses favoris", même celles qui n'ont aucun lien. Etrange, vous ne trouvez pas? Comment expliquez vous ça?

 

[hetzeld]

Lone Chaney,

Les adresses que tu mentionnes sont bien les adresses des robots Inktomi.
N'oublie pas qu'Inktomi a été racheté par Yahoo récemment et est en passe de devenir un moteur TRES important. Il est déjà bien utilisé, par exemple par MSN search.
Il ne faut surtout pas le bannir. Mais tu peux protéger tes répertoires avec un .htaccess et un mot de passe.
C'est trop tard pour aujourd'hui car il le vérifie 1 fois / jour, mais Inktomi respecte le protocole d'exclusion des moteurs. Tu pourrais donc éditer to fichier robots.txt pour interdire tes répertoires "non indexables"

Dan

 

[user-198]

merci beaucoup Dan , tu as fait retomber mon angoisse, je croyais qu'on piratait mon site!

 

[hetzeld]

Lone Chaney,

Pour info, j'ai dû voir passer Inktomi pas loin de 6000 fois depuis janvier, c'est un robot très actif mais aussi très "respectueux" . Il charge très peu le serveur et espace ses visites d'au moins une minute.
C'est une très bonne chose qu'il s'intéresse à ton site... on est tous "branchés google", mais il y a quelques acteurs très importants qui prennent de plus en plus d'importance, dont Fast et Inktomi. Si on a régulièrement les "trois gros" (pas le restaurant, ça ne s'écrit pas pareil :wink: ) sur son site, on peut partir à la pèche tranquillement .

Dan

 

[user-198]

c'est vrai que ses visites sont assez espacées, c'est pour ça que je m'inquiétais.
en tout cas, merci et remerci et bonne journée à toi
Lone

 

[fupap]

" slurp ", c'est aussi inktomi ???

 

[hetzeld]

Oui, Slurp est le nom de l'agent Inktomi.

Dan

 

[JeunZ]

éh hé... je subit les attaques de inktomi aussi cool cool cool...

 

[tom-tom]

Aïe Aïe, il y va comme un bourin ce moteur !
Ce matin, je me suis connecté à mon site, il y avait 10 bots Inktomi ! 8O

 

[tom-tom]

Pire encore, je viens juste me connecter à mon site (forums phpBB), les moteurs Inktomisearch ont fait monté le record du nombre d'utilisateurs en ligne à 204 !!!! Pourquoi un tel acharnement ?

 

[JeunZ]

Moi ils l'ont monté à 200 ^^.


J'ai viré le record, lendemain 191, et j'ai re viré et re 200... donc j'ai laissé ^^

 

[jlauriol]

InktomiSearh : respectueux ! :evil:

Ils sont sur mon site depuis deux jours ( c'est un site recent, sur un serveur dédié recent avec une IP recente ) ils ont déjà consomé pas mal de BP. Trés peu de requetes sur mon site ( 2 ou 3, dont robots.txt et index.php ). Par contre plusieurs centaines de requetes foireuses ( soneries_logo, sex_and_sun, rencontre_gay, ... ). Bien entendu mon serveur repond 404 et je precise que je n'ai jamais inscrit de telles données sur mon serveur ( et je n'ai permis à personne de le faire !)
Alors faut-il consider ces agissements 'normaux'. Ces "quelques acteurs très importants qui prennent de plus en plus d'importance" vont-ils classer mon site dans les tripos et autres fripoulleries ?
SVP: Vérifier vos log et dites moi si vous avez vous aussi ce genre d'agissement.

 

[Pulsar-san]

Il est possible que ton nom de domaine ait déjà été utilisé puis abandonné.

 

[jlauriol]

Non je ne pense pas, aucune trace dans whois depuis deux ans !

Le site en question est www.solutions-rack.com ( c'est du matériel informatique : serveurs, réseaux, onduleurs, etc ... ).

Les requetes Inktomi semblent être formées à partir de dictionnaires de demandes aux moteurs de recherche.

 

[dznet]

Désolé de remonté ce vieux poste maisje viens de réussir à changer les URL de mon forum, et desuite je vois pres de 398 visiteur, j'ai pris peur mais je retrouve la réponse dans ce topic

ce moteur est vraiment tres fort, il a fallut que je change les URL et hop !!

 

[mitchum]

j'up ce topic, car je veisn de voir ce matin environ 200 visites de ce bot, et je me suis demandé ce que c'etait...
en esperant que ce soit benefique pour mon site...
a+

 

[u21296]

j'up ce topic, car je veisn de voir ce matin environ 200 visites de ce bot, et je me suis demandé ce que c'etait...
en esperant que ce soit benefique pour mon site...
a+

Moi j'en ai 50 pour le moment -_-
moi qui pensais que c'était google au début ..
Ralala ..
On verra ds msn et dans yahoo ce que ca donne ..

 

[Romuald]

Sur le coup j'ai bien été surpris aussi. Mais qu'est-ce qui motive ce bot à “flooder” d'un coup comme ça ? Crise de nerf ?
J'ai eu plus de 80 requêtes sur le forum (qui n'est pas trop actif) et une 20aine sur le site.
Ce bot utilise quelle base de donnée de lien ? Car apparemment, il ne visite pas tout (quoique, sur le forum il y est allé de bon cœur).

 

[berou]

Bonjour,
j'up ce post car je viens d'en être victime aussi mais venant de chez gigasearch aussi. Inktomi y est allé également de sa petite visite.

Heureusement, en lisant c epost, j'ai eu plus de peur que de mal.
Merci à tout ceux qui ont posté.

:roll:

 

[nsnfrancais]

Salut

il est vrai que depuis quelques temps on peut constater des passages répétés des slurps ( yahoo ) au même titre que les biglotrons d'ailleurs

même s'ils ni vont pas aussi gaiement que les google bots, ces robots semblent vouloir emmagasiner un maximum de liens

domage seulement que l'on ne puissent pas faire de sitemap xml comme nous pouvons le voir chez google

c'est pourtant une bonne idée, et un gain à tout point de vue, les robots ne patinent plus sur le site en vain, mais parcourent un site via des liens réels, controlés et vérifiés lors de la création du sitemap

peu être pour l'avenir, le feront ils aussi ou tout simplement utiliseront ils ces mêmes sitemap xml
pour l'instant tous les robots identifiés chez moi lisant ces sitemap ne sont bien que des google bots, à charge d'info sur ça

 

[berou]

tu soulève-là un sujet intéressant sachant que j'ai encore été victime du gigasearch, aui en plus m'a exagéremment pris au moins 50 % de ma bande passante sur le moment ou il engloutissait mes liens.

Un jour qui sait ....

Merci de ta réponse en tout cas.

Bonne journée

 

[nsnfrancais]

concernant ce point toujours délicat e la bande passante et des ressources, perso j'ai mis en place un truc tout simple

si un robot d'une liste que j'ai pré-établi arrive sur le site, il ont droit à un template ultra light avec quasiment aucunes images dedans, ainsi que tout code javascripts ou dhtml supprimé

faire ceci demande du taf, mais finalement une page qui pesait 80 Ko n'en pese plus que 18 à la sortie, le gain est donc énorme

j'ai fait idem avec le cache, c'est à dire un cache spécial robot ( uniquement ceux ci peuvent le régénérer ) , ce qui implique que le cache utilisateur peut être par exemple sur 2 heures mais le cache robots lui est sur 24 heures ( ce qui me parait assez proportionnel )

J'ai beaucoup travaillé sur les robots justement pour en arriver à la conclusion qu'il faut s'investir beaucoup dans le développement d'applicatifs dédiés aux bots, celui permet non seulement de gagner en bande passante, mais surtout de laisser libre des ressources pour les utilisateurs, ceux qui sont tout de même les plus importants à soigner

 

[berou]

Je toruve cette idée trs pertinente? Si tu le permets, je vais la soumettre à mon "directeur technique". Bien grand mot mais pour ce qui est de l'entretien poussé et profond, je fais appel à lui.

J'attends ta réponse pour lui soumettre l'idée.

Merci à toi.

 

[nsnfrancais]

J'attends ta réponse pour lui soumettre l'idée.

Excuse moi mais une réponse à quel sujet ?

 

[berou]

Bonjour,

enfait, il s'agit pour moi de savoir si je peux soumettre ton idée à mon technicien. Après tout l'idée est de toi et j'ai pour politique de demander l'assentiment de la personne qui crée avant de faire quoi que ce soit.

Je sais c'est vieux jeu mais c'est un principe chez moi.

:wink:

 

[nsnfrancais]

Sans problême, lol

tu sais les idées sur le net courrent de partout, et si quelquechose est bien libre ce sont bien justement les idées

j'ai justement exposé cette expérience pour que cela serve aux autres, alors vas y

 

[berou]

Je te remercie pour taréponse positive. malheureusement ce sera pour plus tard car mon server a été hacké et là je n'ai plus de forum. Plus rien.
L'hébergeur ne répond pas à mes demandes que ce soit par mail ou par tél donc je suis sans forum.

Me reste plus que mes yeux pour pleurer. :cry: :cry: :cry:
Dès que tout est rentré dans l'ordre je soumettrai cette idée.

Merci en tout cas et @ bientôt.

 

[nsnfrancais]

salut

Pour info, c'était un phpbb ?

 

[berou]

Non du tout. Il s'agit de vbulletin.
Cela change la donne je suppose ?

 

[nsnfrancais]

bonjour

non, cela ne change rien du tout, je suis juste étonné de savoir qu'un vbulletin s'est fait hacké, avec un phpbb rien de plus logique en soit, mais maintenant plus aucun cms open source n'est à l'abris de hacks répétitifs, c'est un peu navrant ...

bon courage à toi

 

[berou]

C'est justement pour cela que j'ai opté pour vbulletin.
Il s'avère que le hacker s'est acharné pdt une semaine avant d epouvoir penetrer le serveur. L'hébergeur à envoyé plus de 450 mails pour m'avertir qu'a la fin il couperait l'accès au forum à cause de ce hacker. finalement ce fut fait. Et rien n'vance. Deux jours sans forums, mes membres râlent et vont voir ailleurs. Logique, sauf les fidèles, mais ils commençent à trouver le temps long.
Bien triste que des gens mettent leurs talents au service du mal, car du mal il en fait. Et je suis personnellement visé dans cette histoire. Car aucun des autres forums du groupe ne fut atteint? Juste le mien. hasard ou coïncidences .....

Merci de ton intérêt.

@ bientôt

berou

 

[david96]

InktomiSearh : respectueux ! :evil:

Ils sont sur mon site depuis deux jours ( c'est un site recent, sur un serveur dédié recent avec une IP recente ) ils ont déjà consomé pas mal de BP. Trés peu de requetes sur mon site ( 2 ou 3, dont robots.txt et index.php ). Par contre plusieurs centaines de requetes foireuses ( soneries_logo, sex_and_sun, rencontre_gay, ... ). Bien entendu mon serveur repond 404 et je precise que je n'ai jamais inscrit de telles données sur mon serveur ( et je n'ai permis à personne de le faire !)
Alors faut-il consider ces agissements 'normaux'. Ces "quelques acteurs très importants qui prennent de plus en plus d'importance" vont-ils classer mon site dans les tripos et autres fripoulleries ?
SVP: Vérifier vos log et dites moi si vous avez vous aussi ce genre d'agissement.

Réponse : 2 ans après ! :lol: (Mais bon les écrits restent hein !)
Je suis d'accord avec toi, à l'instant même, je viens de voir ce bot tester pleins d'arborescences douteuses sur un de mes sites ! :x

edit : En plus c'est bien un bot de Yahoo, alors là je ne comprend pas !!! 8O

 

[pillets]

Réponse un mois après... lol

En regardant les stats d'un des forums dont je m'occupe, j'ai vu que la consommation de bande passante était assez élevée pour un forum de moins de 5000 messages. Pour seulement une dizaine de visite de membres dans la journée j'ai 32 000 pages affichées

En regardant de plus près j'ai vu que la consommation de la bande passante est passé de 270 Mo à 290 Mo en seulement quelques minutes. Quelque minutes encore plus tard je fais "actualiser" et je vois que la consommation est passée de 290 Mo à 330 Mo. Soit 60 Mo de BP en même pas un quart d'heure.

En regardant sur les ip des personnes connectées sur le forum, il s'avérait en effet que c'était le robot inktomi (2 robots en même temps!), je l'ai donc désactive avec un fichier htaccess en mettant ceci :

User-agent: Slurp Disallow: /

Quelques minutes plus tard j'ai un autre robot, celui de google, et j'ai pu voir qu'Inktomi consomme bien plus de bande passante que google.

 

[webmastrice]

Alors je viens de parcourir tous les messages car justement moi aussi j'ai constaté uen véritable "invasion" de inktomisearch.com. En regardant le nombre de mes visiteurs, j'ai vu que ceux ci depuis une semaine avaient doublé et etaient passés de 2000 à 4000 par jours! Et ca m'indique 2000"visiteurs" venant du domaine nktomisearch.com !

alors que dois je faire? Je n'ai pas vraiment saisie Je le laisse vivre sa vie de robot sans m'en occuper?

par avance merci

 

[Ohax]

S'ils ne posent pas de problème pour ton hebergeur (cotas) ou de ralentissements sur ton serveur ou est le problème ?

Enfin, les bots ne chargent pas les images, donc sur le plan de la bande passante aucun problème.

 

[webmastrice]

Alors non non pas de probleme du tout ,mais ce qui m'inquiete c'est surtout qu'il n'etait jamais passé depuis un peu plus de deux ans et que du jour au lendemain il passe énormément dessus et que ca m'a surprise mais bon comme tu dis on verrra bien tant que ca ne cause aucun desagrément, laissons le tranquille le petit

merci