Banir certains robots
6 messages • Page 1 sur 1
Consultez la formation au référencement naturel Google de WebRankInfo / Ranking Metrics
Banir certains robots
Bonjour à tous...
Après avoir installé RobotStats sur mon site, je me suis aperçu que j'étais fréquement visité par un certain robot : "Alexa"
Etant donné qu'il indexe pas mal de mes pages et que bien evidement, il ne m'apporte aucune visite, je voulais l'interdire de scaner mon site via mon fichier robot.txt
Mais avant de faire n'importe quoi, je voulais vous demander si vous connaissiez ce robot et si il n'avait aucun lien avec Google.
Puis-je rajouter la ligne :
Sans craindre une eventuelle répercusion sur mon indexation Google ??
Après avoir installé RobotStats sur mon site, je me suis aperçu que j'étais fréquement visité par un certain robot : "Alexa"
Etant donné qu'il indexe pas mal de mes pages et que bien evidement, il ne m'apporte aucune visite, je voulais l'interdire de scaner mon site via mon fichier robot.txt
Mais avant de faire n'importe quoi, je voulais vous demander si vous connaissiez ce robot et si il n'avait aucun lien avec Google.
Puis-je rajouter la ligne :
- Code: Tout sélectionner
User-agent: ia_archiver
Disallow: /
Sans craindre une eventuelle répercusion sur mon indexation Google ??
easyzik a écrit:Ouai, ben je crois que ça va jarter alors... C'est pas le genre de robots qui rapporte beaucoup de BL je pense....
Est-ce que certains ont égallement ramarqué une visite importante de ce robot chez eux ?
Oui, je suis dans le même cas
-

alexandre le grand - Nouveau WRInaute
- Messages: 20
- Inscription: Lun Avr 03, 2006 18:42
Alexa est un parasite, tu as raison de le bannir, aucun intérêt pour ce moteur et son site mère.
6 messages • Page 1 sur 1
Formation recommandée sur ce thème :
Formation Référencement naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.
Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.
Lectures recommandées sur ce thème :
- Sortie de GoogleStats v2.01
- Les crawlers de Yahoo!
- Les robots MSNbot de Live Search
- Déclarer son fichier sitemap dans le fichier robots.txt
- Petit changement pour Slurp (le robot de Yahoo)
- Robots.txt : Yahoo supporte les options avancées
- La balise meta NOYDIR de Yahoo
- Comment gérer simplement les sitemaps de plusieurs sites au même endroit
- Alexa lance un moteur de recherche d'images
- Sortie officielle de GoogleStats v2.0 !
- banir un Ip avec .htaccess
- banir adresse ip par pays
- banir d'un forum ,legal ou pas ?
- robots.txt et balise meta robots, incompatibilité ?
- Interdire certains robots ? Comment ? Quels robots ?
- Robots utiles et robots inutiles
- Erreurs Robots.txt sans fichier Robots.txt
- Robots et la balise..."Robots"CONTENT="index,
Qui est en ligne
Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités






le forum