Google bot et robots.txt

WRInaute discret
J'ai vu ca dans mes logs :
crawler12.googlebot.com web1 - [12/Nov/2002:07:49:50 +0100] "GET /robots.txt HTTP/1.0" 200 38 "-" "Googlebot/2.1 (+http://www.googlebot.com/bot.html)"
crawler12.googlebot.com web1 - [12/Nov/2002:07:49:50 +0100] "GET / HTTP/1.0" 200 5712 "-" "Googlebot/2.1 (+http://www.googlebot.com/bot.html)"
Cela veut-il dire que google a vu le fichier robots.txt puis est parti de mon site...
 
A
Anonymous
Guest
il a aussi regardé la page d'accueil : "GET / HTTP/1.0" ou du moins celle qui est à la racine "/" du site.
 
A
Anonymous
Guest
Pourquoi google vient voir mon fichier robots.txt ( qui est le meme que sur webrankinfo) et part juste aprés???
 
Discussions similaires
Haut