reperer les robots

[xavewake]

bonjour,
je souhaite realiser un script en php de maniere a reperer les robots. je sais qu il laisse des traces dans les fichiers logs mais je ne parviens pas a les retrouver. Pouvez vous m indiquer ou sont situe exactement les traces ?
merci beaucoup

PS : si vous avez des infos sur un meilleure reperage des bots, merci.

[bertimus]

Salut et bienvenue

Ce type de script existe déjà. Crawltrack ou Robot Stats pourraient-ils répondre à tes besoins ?

[xavewake]

Merci beaucoup, je les ai telecharge. ils possedent une base de donnee de robots qu ils mettent a jour.
Je cherche a definir exactement les traces qu il laisse pour les reperer. je viens d apprendre : la presence du champ "User-Agent" specifique dans les requetes HTTP que les robots envoient.
Ou se situe ce champ "User-Agent" ???
merci

[bertimus]

C'est à partir de ce point que ça me dépasse Je t'invite donc à attendre la réponse de gens + calés que moi

[bozoleclown]

le user agent est placé dans les headers http de la requete vers ton serveur.

$_SERVER['tonheader'];

un peu de doc ici http://perso.univ-rennes1.fr/pascal.aub ... server.php

[erestrebian]

a priori avec get_browser en php tu devrais pouvoir trouver ton bonheur.

Code: Tout sélectionner

$browser = get_browser(null, true);
if ($browser['crawler']==1)

tu as à faire avec un crawler donc de type googlebot... perso je n'ai jamais essayer

sinon :

Code: Tout sélectionner

$_SERVER['HTTP_USER_AGENT']

mais dans ce cas, il faut que tu listes tous les user-agent des bots et là vaut mieux utiliser les scripts fournis précédement

[xavewake]

je regarde tout cela.
meri beaucoup a tous