Erreurs Robots.txt sans fichier Robots.txt

Consultez la formation au référencement naturel Google de WebRankInfo / Ranking Metrics


Dark_Shark
WRInaute impliqué
WRInaute impliqué
 
Messages: 404
Inscription: Jeu Mar 09, 2006 18:10

Erreurs Robots.txt sans fichier Robots.txt

Message le Ven Mai 11, 2007 1:55

Salut à tous !

Voila depuis quelque temps que j'ai des erreurs robots.txt qui portent sur des URLs de mes sites alors que je n'ai aucun robots.txt existant sur aucun de mes sites :?

Une piste ? Bug Google ? D'autres dans le même cas ?

Merci :wink:

XtofotX
Nouveau WRInaute
 
Messages: 29
Inscription: Mar Aoû 30, 2005 4:31

Message le Ven Mai 11, 2007 3:53

Est-ce qu'il y a vraiment un rapport avec AdSense?
Quel genre d'erreur obtiens-tu?

A vue de nez et avec ce que je sais, c'est probablement une erreur 404 que tu obtiens justement parce que tu n'as pas de fichier robots.txt et que Google (et les autres moteurs) le cherchent avant de crawler ton site.

MisterLyle
WRInaute discret
WRInaute discret
 
Messages: 91
Inscription: Mer Mai 31, 2006 17:05

Message le Ven Mai 11, 2007 9:09

XtofotX a écrit:Est-ce qu'il y a vraiment un rapport avec AdSense?
.


oui: j'ai les memes erreurs trouvées par l'outil de diagnotic intégré à adsense...

crxman
WRInaute discret
WRInaute discret
 
Messages: 51
Inscription: Mer Oct 20, 2004 2:34

Message le Ven Mai 11, 2007 10:18

Moi aussi, j'ai crée un fichier comme gg me le conseillais dans le FAQ ...


Dark_Shark
WRInaute impliqué
WRInaute impliqué
 
Messages: 404
Inscription: Jeu Mar 09, 2006 18:10

Message le Ven Mai 11, 2007 14:25

Je vais essayé avec ca alors :

User-Agent: *
Disallow:

LebossTom
Nouveau WRInaute
 
Messages: 33
Inscription: Mer Avr 18, 2007 22:20

Message le Lun Juil 09, 2007 0:40

les bots comme googlebot ont l'obligation d'aller voir ton robots.txt.
Si tu n'en as pas ton serveur renvoi un 404.

rassure toi c'est tout à fait normal.

NextGeneration
WRInaute impliqué
WRInaute impliqué
 
Messages: 425
Inscription: Mer Sep 27, 2006 18:34

Message le Lun Juil 09, 2007 7:33

LebossTom... Si je te dis Kwisskass ca te dit qqchose ?


carrel
WRInaute accro
WRInaute accro
 
Messages: 2744
Inscription: Mer Oct 18, 2006 15:13

Message le Lun Juil 09, 2007 7:50

Regarde dans tes stats, effectivement cela doit être des erreurs 404.


cprail
WRInaute accro
WRInaute accro
 
Messages: 1564
Inscription: Dim Mar 05, 2006 20:09

Message le Lun Juil 09, 2007 22:40

Les bots n'ont aucun moyen de savoir s'il y a un robots.txt ou non tant qu'ils n'ont pas essayés et obtenus (ou non) une erreur ;)

Ajoute un robots.txt vide si ça peut te rassurer.


Formation recommandée sur ce thème :

Formation Référencement naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.

Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.

Lectures recommandées sur ce thème :



Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités