Aide pour réalisation d'un robots.txt restrictif

Règles du forum
Attention ce forum est destiné avant tout à ceux qui découvrent le référencement. Les membres qui auront l'amabilité de répondre à leurs questions sont priés de rester courtois, polis, indulgents, patients et pédagogues... Merci d'avance !

Par ailleurs, inutile d'utiliser ce forum uniquement pour obtenir des liens vers vos sites, les liens sont désactivés pour le référencement (nofollow).

Consultez la formation au REFERENCEMENT naturel Google de WebRankInfo / Ranking Metrics


milkiway
WRInaute accro
WRInaute accro
 
Messages: 4910
Inscription: 3 Fév 2004

Aide pour réalisation d'un robots.txt restrictif

Message le Lun Oct 24, 2011 10:22

Bonjour,

Dans un fichier robots.txt, si on définit la règle suivante :
User-agent: *
Disallow: /

User-agent: Googlebot-Image
Allow: /

Me confirmez vous que cette règle interdit l'accès à tous les robots sauf au robot Google Image ?
La seconde consigne n'est pas courcircuitée par la première (disallow global tout moteur) ?

Merci
Dernière édition par milkiway le Lun Oct 24, 2011 10:43, édité 1 fois.


milkiway
WRInaute accro
WRInaute accro
 
Messages: 4910
Inscription: 3 Fév 2004

Re: Ordre des consignes robots.txt

Message le Lun Oct 24, 2011 10:29

A moins qu'il ne faille faire :
Code: Tout sélectionner
User-agent: *
Disallow: /

User-agent: Googlebot-Image
Disallow: /
Allow: /*.jpg$
Allow: /*.jpeg$
Allow: /*.gif$
Allow: /*.png$

?


UsagiYojimbo
WRInaute accro
WRInaute accro
 
Messages: 8565
Inscription: 23 Nov 2005

Re: Aide pour réalisation d'un robots.txt restrictif

Message le Lun Oct 24, 2011 11:01

Dans le premier exemple, j'aurai plutôt fait l'inverse. Par contre, tu peux tester la manière dont le bot va analyser le robots.txt directement sous GWT maintenant.


milkiway
WRInaute accro
WRInaute accro
 
Messages: 4910
Inscription: 3 Fév 2004

Re: Aide pour réalisation d'un robots.txt restrictif

Message le Lun Oct 24, 2011 11:07

Merci. Oui j'ai bien testé dans WMT mais les infos sont tellement vagues que ça n'aide pas vraiment.
En gros il me dit pour le bot image qu'il est bloqué, mais qu'il ai possible qu'il ne le soit pas ...


Si vous avez aimé cette discussion, partagez-la sur vos réseaux sociaux préférés :

Formation recommandée sur ce thème :

Formation REFERENCEMENT naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.

Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.

Lectures recommandées sur ce thème :



Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 1 invité