indexation du robots.txt!!! bizzare
11 messages
• Page 1 sur 1
Consultez la formation au REFERENCEMENT naturel Google de WebRankInfo / Ranking Metrics
-

soccarfr - WRInaute discret

- Messages: 99
- Inscription: 1 Sep 2004
indexation du robots.txt!!! bizzare
Bonsoir à tous,
je viens de remarquer un truc bizzare. Parmi les pages indexés que je trouve avec la commande site, se trouve mon robots.txt!!!
c'est complétement débiles de l'afficher parmi les résultats!!!
ça vous est déjà arrivé??
je viens de remarquer un truc bizzare. Parmi les pages indexés que je trouve avec la commande site, se trouve mon robots.txt!!!
c'est complétement débiles de l'afficher parmi les résultats!!!
ça vous est déjà arrivé??
-

~hcplayer~{feh}~ - WRInaute discret

- Messages: 158
- Inscription: 21 Fév 2004
le mien aussi, ça fait 1 mois 
- Erazor
- WRInaute accro

- Messages: 5165
- Inscription: 14 Fév 2004
kelkon ce robot :
http://www.google.fr/search?q=/robots.t ... art=0&sa=N
http://www.google.fr/search?q=/robots.t ... art=0&sa=N
- vin-moi
- WRInaute occasionnel

- Messages: 391
- Inscription: 22 Nov 2004
Machin a écrit:jeromax a écrit:z'avez vu celui là ????
-http://www.whitehouse.gov/robots.txt
Pot de miel pour pirates du dimanche. Il vaut mieux ne pas aller promener son IP dans ce genre de répertoires.
tu veut dire quoi par là ?
-

Zirone - WRInaute occasionnel

- Messages: 372
- Inscription: 5 Oct 2004
vin-moi a écrit:Machin a écrit:jeromax a écrit:z'avez vu celui là ????
-http://www.whitehouse.gov/robots.txt
Pot de miel pour pirates du dimanche. Il vaut mieux ne pas aller promener son IP dans ce genre de répertoires.
tu veut dire quoi par là ?j'ai cliqué
qu'il doive reperer et garder les ip ..
- Blaze_Heatnix
- WRInaute occasionnel

- Messages: 321
- Inscription: 31 Déc 2003
vin-moi a écrit:Machin a écrit:tu veut dire quoi par là ?j'ai cliqué
qu'il doive reperer et garder les ip ..
Oups...
Enfin bon, c'est pas si dramatique que cela... Je vois mal débarquer des agents du fbi , chez toutes les personnes qui auront eu le "malheur" de cliquer sur leur fichier robots.txt ...

11 messages
• Page 1 sur 1
Formation recommandée sur ce thème :
Formation REFERENCEMENT naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.
Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.
Lectures recommandées sur ce thème :
- Indexation bizzare
- Bizzare bizzare (densité, backlinks...)
- robots.txt et indexation
- Indexation robots.txt
- Indexation du fichier robots.txt
- Indexation d'images et robots.txt
- Indexation, robots et url rewriting
- [Robots] Tests , detection , indexation.
- indexation étrange des robots
- Robots.txt et indexation page de recherche
- Sortie de GoogleStats v2.01 - 02-03-2003
- Les crawlers de Yahoo! - 18-03-2004
- Googlebot, le robot d'indexation de Google - 21-02-2003
- Outil officiel de suppression de pages de l'index Google - 18-04-2007
- Les robots MSNbot de Live Search - 30-11-2006
- Etude de Googlebot, le robot crawler de Google (Fresh Bot, Deep Bot) - 05-09-2008
- Déclarer son fichier sitemap dans le fichier robots.txt - 16-04-2007
- Petit changement pour Slurp (le robot de Yahoo) - 29-03-2007
- Tester l'indexation récente d'un site dans Google
Cet outil vous permet de connaître une estimation de l'ancienneté d'un site : il fournit la date à laquelle Google l'a indexé la première fois (et la même chose pour archive.org). - Trouver les sous-domaines
Cet outil vous permet de trouver la liste des sous-domaines (indexés) d'un site.
Qui est en ligne
Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités


