interdir tous les robots sauf un seul

Consultez la formation URL Rewriting et sites dynamiques de WebRankInfo / Ranking Metrics

hamdi369
Nouveau WRInaute
Nouveau WRInaute
 
Messages: 3
Inscription: 7 Avr 2010

interdir tous les robots sauf un seul

Message le Mer Avr 07, 2010 21:35

Bonsoir

j'ai beau chercher je ne trouve pas comment créer un fichier htaccess qui n'autorise qu'un seul,robot-user agent pour un dossier précis de mon site

Par exemple si je ne veux autoriser qu'un seul user agent comment faire?

je vous remercie pour votre aide


eskimo
WRInaute discret
WRInaute discret
 
Messages: 201
Inscription: 21 Oct 2007

Re: interdir tous les robots sauf un seul

Message le Mer Avr 07, 2010 22:08

peut être que cela serait plus simple avec un peu de php, non?


jeanluc
WRInaute accro
WRInaute accro
 
Messages: 3062
Inscription: 3 Mai 2004

Re: interdir tous les robots sauf un seul

Message le Jeu Avr 08, 2010 8:18

Bonjour,

Tu veux autoriser n'importe quel visiteur humain et interdire tous les robots sauf un user-agent précis ? Ce n'est pas réalisable de manière fiable.

Le plus simple serait de passer par robots.txt. Là tu peux facilement interdire tous les robots sauf un. Ce n'est pas très fiable non plus puisque certains robots peuvent lire l'interdiction et passer outre.

Jean-Luc


Nic'O
WRInaute discret
WRInaute discret
 
Messages: 181
Inscription: 13 Mai 2009

Re: interdir tous les robots sauf un seul

Message le Jeu Avr 08, 2010 8:31

Code: Tout sélectionner
User-Agent:MonBotAutorisé
Allow:/
User-Agent: *
Disallow: /


Peut être ça ?


jeanluc
WRInaute accro
WRInaute accro
 
Messages: 3062
Inscription: 3 Mai 2004

Re: interdir tous les robots sauf un seul

Message le Jeu Avr 08, 2010 8:41

Plutôt comme ceci:
Code: Tout sélectionner
User-Agent:MonBotAutorisé
Disallow:

User-Agent: *
Disallow: /

La ligne vide est obligatoire entre deux séries de directives qui s'adressent à des robots différents. "Disallow:" (sans rien derrière) n'interdit rien et est compris par tous les robots alors que "Allow" n'est pas standard.

Jean-Luc


Nic'O
WRInaute discret
WRInaute discret
 
Messages: 181
Inscription: 13 Mai 2009

Re: interdir tous les robots sauf un seul

Message le Jeu Avr 08, 2010 8:50

Au temps pour moi !
Pour l'espace entre les règles je n'étais pas au courant.

Pour le Allow, j'y est pensé et m'était inspiré de celui de Google.fr qui en contient (des "Allow").

hamdi369
Nouveau WRInaute
Nouveau WRInaute
 
Messages: 3
Inscription: 7 Avr 2010

Re: interdir tous les robots sauf un seul

Message le Ven Avr 09, 2010 15:34

je vous remercie sincerement pour vos réponses

mais ce que je recherche à faire c'est bloquer un dossier (par ex "test") de mon site à tous les browser et autres robots spider ect... (users agents) sauf un seul que j'ai réalisé moi meme ("mon-user-agent"), avec un fichier .htaccess uniquement.
En quelque sorte les visiteurs ne peuvent consulter cette partie de ce site uniquement avec ce navigateur ("mon-user-agent"), et tous les autres user agent sont interdits d'access a ce dossier

pas un fichier robots.txt mais un truc super costaud et radical.

Pensez vous qu'il y ai une solution?


Nic'O
WRInaute discret
WRInaute discret
 
Messages: 181
Inscription: 13 Mai 2009

Re: interdir tous les robots sauf un seul

Message le Ven Avr 09, 2010 15:57

L'user agent est modifiable donc cette restriction est facile à contourner.

hamdi369
Nouveau WRInaute
Nouveau WRInaute
 
Messages: 3
Inscription: 7 Avr 2010

Re: interdir tous les robots sauf un seul

Message le Ven Avr 09, 2010 17:19

oui mais c'est pas grava si les gent modifie l'user agent ils ne pourront plus acceder a cette partie du site.

Voila deja plusieurs jours que je galere a creer un fichier .htaccess qui n'autorise qu'un seul user agent pour un seul dossier d'un site


Si vous avez aimé cette discussion, partagez-la sur vos réseaux sociaux préférés :

Formation recommandée sur ce thème :

Formation URL Rewriting et sites dynamiques : apprenez comment mettre en place la réécriture d'URL, comment optimiser vos URL et profiter de vos pages dynamiques pour booster votre référencement. Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.

Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.

Lectures recommandées sur ce thème :



Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités