Crawl de Google erreur 404

**le Jeu Juil 06, 2006 10:02**

Bonjour, j'ai installé CrawlTrack hier, après vérification ce matin, 3 bots sont passés sur mon site (MSN, Google et Exabot).

Ce que je comprend pas c'est qu'ils crawl tous en majorité sur ma page d'erreur 404 :s

J'ai vérifié tous les liens du site, il ne semble pas y avoir d'erreur, rien qui pourrait les mener vers une erreur 404.

Google par exemple ne visite que ma page d'accueil et ma page d'erreur 404.

Vous avez uné idée ?

**le Jeu Juil 06, 2006 10:07**

utilise google sitemaps, ça devrait t'être utile

**le Jeu Juil 06, 2006 10:12**

un BL mort !??

**le Jeu Juil 06, 2006 10:23**

Il faut que tu regardes dans tes logs quel page possede le lien qui provoque l'arrivée sur la page 404

A+

**le Jeu Juil 06, 2006 10:31**

vincenzoR, utilises xenu pour voir si tu as des 404 (google -> télécharger xenu)

**le Jeu Juil 06, 2006 10:34**

TOMHTML a écrit:utilise google sitemaps, ça devrait t'être utile

Je l'utilise déjà.

Je télécharge Xenu, je vais essayer.

Par contre, est-ce normal qu'il ne se rende pas plus loin lorsqu'il tombe sur l'erreur 404 ?

**le Jeu Juil 06, 2006 10:44**

Voilà le résultat de Xenu :

-http://www.cr€ations€ns€.com/r€ports/

Je n'ai pas de problèmes, par contre j'ai mes pages qui sont dupliquées avec le PHPSESSID ...

**le Ven Juil 07, 2006 8:18**

Je viens de revérifier, j'ai les bots Alexa, Yahoo et Google qui sont passés, de nouveau ils s'arrentent à la page erreur 404 ?

C'est bizzare quand, c'est pas dû à l'URL rewriting ?

**le Ven Juil 07, 2006 8:19**

nom de domaine concerné ?

**le Ven Juil 07, 2006 8:24**

vincenzoR a écrit:Je viens de revérifier, j'ai les bots Alexa, Yahoo et Google qui sont passés, de nouveau ils s'arrentent à la page erreur 404 ?

C'est bizzare quand, c'est pas dû à l'URL rewriting ?

Je me repete que disent les logs, s'agit-il d'une url directement appelée par les robots si non de quelle page provient le lien en erreur, tout cela tu le retrouves dans tes logs

A+

**le Ven Juil 07, 2006 9:36**

Le nom de domaine c'est celui de mon profil.

J'ai vérifié dans mes logs, il semble que les robots essayent d'accéder au fichier robots.txt, lequel n'est pas présent, je l'ai rajouté avec User-agent: * on va voir ce que ça donne.

J'avais aussi un site_map.xml, et google semblait essayer sitemap.xml, j'ai modifié le nom du fichier, à voir aussi.

Merci, je vous informerai de la suite.

**le Ven Juil 07, 2006 10:03**

je testerai quand ton site sera accéssible ^^

**le Ven Juil 07, 2006 10:44**

e-kiwi a écrit:je testerai quand ton site sera accéssible ^^

Comment ça ? Il est accessible ...

**le Ven Juil 07, 2006 10:52**

à 11:03 pas de chez moi, maintenant oui

**le Ven Juil 07, 2006 11:09**

La puissance d'OVH ... :wink:

Sinon tu as repéré quelque chose ?

Crawl de Google erreur 404

Crawl de Google erreur 404

Formation recommandée sur ce thème :

Lectures recommandées sur ce thème :

Qui est en ligne