Interdire inktomi

Consultez la formation au référencement naturel Google de WebRankInfo / Ranking Metrics

karan
WRInaute discret
WRInaute discret
 
Messages: 54
Inscription: Lun Mai 03, 2004 15:16

Interdire inktomi

Message le Ven Nov 19, 2004 21:05

Comment interdire le robot inktomi tout en autorisant goglebot ?

Est-ce ce fichier robots.txt est correct ?

User-agent:inktomi
Disallow:/

Commentinterfire inktomi par metatag ?

.
.


niceunef
WRInaute accro
WRInaute accro
 
Messages: 1811
Inscription: Lun Jan 19, 2004 18:55

Message le Sam Nov 20, 2004 0:35

http://help.yahoo.com/help/us/ysearch/slurp/index.html
http://www.robotstxt.org/wc/active/html/slurp.html

Le user-agent est Slurp
il semble possible de l'interdire par meta (si je croise les 2 infos): <META NAME="slurp" CONTENT="noindex"> comme pour Googlebot (a vérifier)


mahefarivony
WRInaute accro
WRInaute accro
 
Messages: 11405
Inscription: Lun Oct 14, 2002 10:00

Message le Sam Nov 20, 2004 2:00

quelle connerie que d'interdire yahoo..

PS: ça n'engage que moi....


Formation recommandée sur ce thème :

Formation Référencement naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.

Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.

Lectures recommandées sur ce thème :



Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités