Yahoo Slurp et mon robots.txt

[serval2a]

Je constate une grande histoire d'amour entre ces deux individus.

Jusqu'au 30/03/05 mon site (dans le www) était crawlé par yahooseeker et depuis par yahoo slurp.

Seulement il y a un problème : si ce dernier vient 3 fois par jour, il se contente de mon fichier robots.txt qui, je le précise, ne l'exclue pas.

D'où seulement 2 pages d'indexées alors que j'en avais péniblement 15 avec yahooseeker.

Quelqu'un a-t-il une idée ?

[serval2a]

Attention ceci n'est pas un UP mais un début de réponse à ma propre question.

Je me suis fait avoir par 2 rediréction 302 (je sais j'avais pris la défense de ce type d'annuaire).

En effet, yahoo a comme cache de mes 2 dernières pages l'adresse de la redirection (goto...).

J'espère ne pas faire fausse route puisque j'ai interdit l'accès à Slurp par robots.txt le temps d'être totalement désindexé puis je repartirais avec une nouvelle indexation Yahoo.

[Mumuri]

a la limite tu peux peut etre modifier ton code pour que le fichier robots.txt soit éffacé quand yahoo slurp vient te faire un coucou et recrée quand il s'en va