Robot.txt et MSN
3 messages
• Page 1 sur 1
Consultez la formation au REFERENCEMENT naturel Google de WebRankInfo / Ranking Metrics
-

correiaj - WRInaute passionné

- Messages: 1110
- Inscription: 25 Avr 2005
Robot.txt et MSN
Salut,
Quelqu´un saurait comment dire à msnbot de ne pas indexer mes fichiers dans une directorie?
j´ai ça:
User-agent: *
Disallow: /includes
mais il indexe toujours includes/compteur.php
Je comprends pas, il est bête ou quoi?
Quelqu´un saurait comment dire à msnbot de ne pas indexer mes fichiers dans une directorie?
j´ai ça:
User-agent: *
Disallow: /includes
mais il indexe toujours includes/compteur.php
Je comprends pas, il est bête ou quoi?
-

jeanluc - WRInaute accro

- Messages: 3062
- Inscription: 3 Mai 2004
Bonjour,
C'est le malentendu classique à propos du robots.txt.
Ce que tu as fait, c'est interdire au robot MSN (et aux autres) de visiter ta page includes/compteur.php et tout indique qu'il respecte cette interdiction. Cette page ne se retrouve pas dans le résultat de cette recherche : http://search.msn.fr/results.aspx?q=sit ... &FORM=QBRE .
Par contre, l'adresse de la page, le robot l'a trouvée dans d'autres pages et il sait donc que ce lien existe : http://search.msn.fr/results.aspx?q=sit ... &FORM=QBRE , mais tu vois que, pour cette page, il n'y a pas de cache disponible.
Voilà, voilà...
Jean-Luc
C'est le malentendu classique à propos du robots.txt.
Ce que tu as fait, c'est interdire au robot MSN (et aux autres) de visiter ta page includes/compteur.php et tout indique qu'il respecte cette interdiction. Cette page ne se retrouve pas dans le résultat de cette recherche : http://search.msn.fr/results.aspx?q=sit ... &FORM=QBRE .
Par contre, l'adresse de la page, le robot l'a trouvée dans d'autres pages et il sait donc que ce lien existe : http://search.msn.fr/results.aspx?q=sit ... &FORM=QBRE , mais tu vois que, pour cette page, il n'y a pas de cache disponible.
Voilà, voilà...
Jean-Luc
3 messages
• Page 1 sur 1
Formation recommandée sur ce thème :
Formation REFERENCEMENT naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.
Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.
Lectures recommandées sur ce thème :
Consultez la description détaillée des produits ou services de Google suivants : Google Feed Fetcher, Googlebot
Qui est en ligne
Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités
