robots.txt incapable de bloquer ces robots :

Consultez la formation au REFERENCEMENT naturel Google de WebRankInfo / Ranking Metrics

davis22
WRInaute discret
WRInaute discret
 
Messages: 53
Inscription: 1 Mai 2009

robots.txt incapable de bloquer ces robots :

Message le Ven Mai 01, 2009 2:00

bonjour
j ai une partie de mon siteweb proteger par un robots.txt pour quil ne soit pas indexer
mais malheuresement je voir le passage des robots : inktomi - yahoo - Rippers - et d autre robot bizzars
quelqu un a une solution pour bloquer ces robots ?

Si vous avez aimé cette discussion, partagez-la sur vos réseaux sociaux préférés :

Formation recommandée sur ce thème :

Formation REFERENCEMENT naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.

Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.

Lectures recommandées sur ce thème :



Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités