les aspirateurs et robots.txt
2 messages • Page 1 sur 1
Consultez la formation au référencement naturel Google de WebRankInfo / Ranking Metrics
les aspirateurs et robots.txt
Bonjour,
j'aurai aimé savoir si les aspirateurs prennent en compte les fichiers robots.txt?
Si vous avez quelques conseils pour éviter les aspirateurs d'accéder à des dossiers sa serait sympa !
Merci a bientot
j'aurai aimé savoir si les aspirateurs prennent en compte les fichiers robots.txt?
Si vous avez quelques conseils pour éviter les aspirateurs d'accéder à des dossiers sa serait sympa !
Merci a bientot
- bozoleclown
- WRInaute passionné

- Messages: 893
- Inscription: Jeu Nov 24, 2005 19:08
non les aspirateurs ne prennent pas en compte les fichiers robots.txt
2 messages • Page 1 sur 1
Formation recommandée sur ce thème :
Formation Référencement naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.
Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.
Lectures recommandées sur ce thème :
- Sortie de GoogleStats v2.01
- Les crawlers de Yahoo!
- Les robots MSNbot de Live Search
- Déclarer son fichier sitemap dans le fichier robots.txt
- Petit changement pour Slurp (le robot de Yahoo)
- Robots.txt : Yahoo supporte les options avancées
- La balise meta NOYDIR de Yahoo
- Comment gérer simplement les sitemaps de plusieurs sites au même endroit
- Alexa lance un moteur de recherche d'images
- Sortie officielle de GoogleStats v2.0 !
Qui est en ligne
Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 1 invité

le forum