Identifier des robots
1 message • Page 1 sur 1
Identifier des robots
Bonjour,
Via AWSTAT, j'ai vu que j'avais ces robots qui étaient passé sur mon site, au lieu de tracker tous les robots du WEB, je voudrais me focaliser sur ceux là.
Pouvez vous m'aider à configurer Robot stat pour que je puisse tracer tous les robots ?
Voici ce que j'ai dans ma configuration :
- Google : Par l'adresse IP 66.249 & 64.68.8 (Ok ça marche bien)
- Voila : Nom d'agent Mozilla/4.0 (compatible; MSIE 5.0; Windows 95) VoilaBot; 1.6 : NICKEL
- Yahoo : nom d'agent : " Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)" : NICKEL
- MSN : nom d'agent " msnbot/1.0 (+http://search.msn.com/msnbot.htm)" : NICKEL
Par contre pour ceux là, je n'ai rien ??? :
AltaVista : nom d'agent : Mercator pas d'info ???
AOL (fr) : : Pas d'info
Tiscali : pas de robots trouvé
Lycos : nom d'agent : Lycos_Spider_(T-Rex) (j'ai rien)
Free.fr : nom d'agent : lwp-trivial/1.34 (aucune trace)
Excite : nom d'agent : ArchitextSpider (aucune trace)
Club-internet : pas de nom rien trouvé ?
Merci pour votre aide
Michel
Via AWSTAT, j'ai vu que j'avais ces robots qui étaient passé sur mon site, au lieu de tracker tous les robots du WEB, je voudrais me focaliser sur ceux là.
Pouvez vous m'aider à configurer Robot stat pour que je puisse tracer tous les robots ?
Voici ce que j'ai dans ma configuration :
- Google : Par l'adresse IP 66.249 & 64.68.8 (Ok ça marche bien)
- Voila : Nom d'agent Mozilla/4.0 (compatible; MSIE 5.0; Windows 95) VoilaBot; 1.6 : NICKEL
- Yahoo : nom d'agent : " Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)" : NICKEL
- MSN : nom d'agent " msnbot/1.0 (+http://search.msn.com/msnbot.htm)" : NICKEL
Par contre pour ceux là, je n'ai rien ??? :
AltaVista : nom d'agent : Mercator pas d'info ???
AOL (fr) : : Pas d'info
Tiscali : pas de robots trouvé
Lycos : nom d'agent : Lycos_Spider_(T-Rex) (j'ai rien)
Free.fr : nom d'agent : lwp-trivial/1.34 (aucune trace)
Excite : nom d'agent : ArchitextSpider (aucune trace)
Club-internet : pas de nom rien trouvé ?
Merci pour votre aide
Michel
1 message • Page 1 sur 1
Lectures recommandées sur ce thème :
- Sortie officielle de GoogleStats v2.0 !
- Sortie de GoogleStats v2.01
- Les crawlers de Yahoo!
- Des informations sur l'algorithme de Yahoo Search fournies par Priyank Garg
- Référencement d'un forum phpBB
- Les robots MSNbot de Live Search
- Déclarer son fichier sitemap dans le fichier robots.txt
- Petit changement pour Slurp (le robot de Yahoo)
- Robots.txt : Yahoo supporte les options avancées
- La balise meta NOYDIR de Yahoo
- identifier un hote
- Identifier un cookie de session
- identifier le lobbi-isme
- Identifier le Bot Google ?
- Problème pour identifier un hébergeur
- Identifier un script trop gourmand
- Identifier un internaute avec certitude
- Identifier les pages satellites ?
- Identifier un utilisateur de façons certaine
- [sql] Identifier ses pages gourmandes
- Identifier quelqu'un avec seulement son IP
- Identifier automatiquement la page à laquelle on apparait ?
- Identifier les mots clés tapés
- identifier un hack perl dans les logs
- Identifier une série d'IP par ville
Qui est en ligne
Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités

le forum