Quel intéret de mettre un lien vers robots.txt?

**le Mar Jan 11, 2005 20:05**

salut à tous!!

voilà j'ai un soucis avec la page de détail sur mon site dans l'annuaire. Dedans ya un lien vers mon fichier robots.txt, ce qui fait que GG l'as indexé.
Je trouve que ça a aucun intérèts de mettre un lien vers ce fichier et que c'est même dangereux.

Dans mon cas y des répertoires qui ne doivent pas être indexé et donc pas vu pas le public, et dans les résultats GG y'a clairement ces répertoires.

Si le webmaster pouvait enlevé ce lien ce serait cool.

merci

**le Mar Jan 11, 2005 20:36**

Aucun interêt, c'est clair. Perso je prefererais aussi que mon robot.txt n'apparaissent pas sur les moteurs. D'ailleurs c'est le seul fichier pour lequel on ne peut pas interdire l'indexation!

**le Mar Jan 11, 2005 20:42**

salut à tous!!

voilà j'ai un soucis avec la page de détail sur mon site dans l'annuaire. Dedans ya un lien vers mon fichier robots.txt, ce qui fait que GG l'as indexé.
Je trouve que ça a aucun intérèts de mettre un lien vers ce fichier et que c'est même dangereux.

Tu crois qu'il a besoin d'un lien pour le trouver ? :lol:

je doute que google indexe les fichiers robots.txt quand même....

Cela dit je suis d'accord que ça n'a pas bcp d'intérêt de mettre ça dans l'annuaire...

**le Mar Jan 11, 2005 20:48**

Si si, Google indexe les robots.txt!

**le Mar Jan 11, 2005 21:48**

faudrait que Olivier l'enlève au plus vite car c'est vrament dangereux

**le Mar Jan 11, 2005 22:08**

Est-ce que GG suit les liens javascript dans les robots.txt ? :lol:

**le Mar Jan 11, 2005 22:09**

Tu met du javascript dans les robots.txt???

**le Mar Jan 11, 2005 22:11**

Faut bien redistribuer le PR du robots.txt, non ?

**le Mar Jan 11, 2005 22:17**

c'est pas fait pour ça et puis de toute façon les moteurs ne suivent pas ou très peu le javascript.

PS: j'ai un PR 2 sur le robots.txt, c'est débile lol

**le Mar Jan 11, 2005 22:18**

ce fichier est fait pour etre consulté par les robots et non indexé comme le contenu d'un site .. quelle drole d'idée de pointer dessus ...

**le Mar Jan 11, 2005 22:48**

tradjus a écrit:Est-ce que GG suit les liens javascript dans les robots.txt ?

Trop bon

De toute façon on trouve le robot.txt trés facilement pas besoin de googe...

**le Mar Jan 11, 2005 23:07**

faudrait que Olivier l'enlève au plus vite car c'est vrament dangereux

Dangereux ? le fichier est forcément accessible à tous le monde de toute façon.....

**le Mar Jan 11, 2005 23:13**

dangereux, j'espère pas pour toi sinon tu devrais lire quelques infos sur la sécurité des sites... En effet ce fichier est accessible à tous et ne doit en aucun cas faire partie d'un processus visant à sécuriser un site.

Si je l'ai mis, c'est pour que le webmaster puisse le vérifier, mais j'avoue qu'un lien vers un vérificateur (de syntaxe) étant suffisant, j'ai supprimé le lien vers ce fichier.

**le Mer Jan 12, 2005 0:43**

tiens c'est rigolo moi aiussi mon fichier a PR 2
:lol:

**le Mer Jan 12, 2005 8:56**

Moi aussi j'ai un PR2, mais c'est peut être parce qu'il contient du Flash

Quel intéret de mettre un lien vers robots.txt?

Intéret du lien vers le robots.txt dans chaque description de sites

Quel intéret de mettre un lien vers robots.txt?

Lectures recommandées sur ce thème :

Qui est en ligne