Afin d'éviter les téléchargements massifs de mon site j'ai mis en place une procédure de blocage des IP qui ne respectent pas les instructions contenues dans le fichier robots.txt. Seulement voilà, si GoogleBot indexe le site sans problème il ne semble pas être le cas du spider ayant l'IP 66.249.90....