robots.txt : interdire tout sauf la racine

[ajedt]

Bonjour,

Après avoir lu quelque part que nommer les dossiers à ne pas faire visiter aux robots dans le robots.txt revenait aussi à faciliter la recherche des dossiers "intéressants" aux "crackeurs" je me demande et cherche (en vain) s'il est possible d'interdire la visite de tous les dossiers d'un site sans les nommer tout en maintenant autorisés ceux présent en root.
en effet si je place l'instruction :

Code: Tout sélectionner

Disallow: /

même les fichiers placés en root ne seront pas visités.

Une solution ? (Je ne parle pas du .htaccess)

Cordialement

[carole heinz]

(Je ne parle pas du .htaccess)

il faudrait pourtant le robots.txt ne s'adresse qu'aux robots bien éduqués et polis.

[jm45]

Je crois qu'il manque une ligne, mais on peut aussi indiquer une liste de moteurs concernés.

[jeanluc]

Tu pourrais mettre:

Code: Tout sélectionner

User-agent: *
Disallow: /repertoire1/
Disallow: /machin/
Disallow: /pas-touche/


Si tu veux être plus discret et si tu es certain qu'il n'y a pas de confusion possible avec d'autres fichiers, tu peux mettre:

Code: Tout sélectionner

User-agent: *
Disallow: /reperto
Disallow: /mach
Disallow: /pas-tou


De cette façon, robots.txt n'indique plus les noms des répertoires et les robots malveillants n'y trouvent plus d'info utile.

Jean-Luc

[Megachercheur]

Superbe astuce, Jean-Luc !