Interdiction d'url robots.txt

[Kervano]

Bonjour,

Je ne comprends pas pourquoi les url comme

http://www.santenature.fr/paiement.php

sont toujours présente dans google, cela fait pourtant un moment que mon fichier robots.txt contient Disallow: /paiement.php

Je précise que les urls de ce type sont à la racine du site soit www

Mon robots.txt est t'il bien parametré? Ci joint le contenu de mon fichier.

Code: Tout sélectionner

# These settings will keep spiders from indexing your unwanted pages
Disallow: /includes
Disallow: /account.php
Disallow: /advanced_search.php
Disallow: /checkout_shipping.php
Disallow: /create_account.php
Disallow: /login.php
Disallow: /password_forgotten.php
Disallow: /popup_image.php
Disallow: /shopping_cart.php
Disallow: /contact_us.php
Disallow: /product_reviews_write.php
Disallow: /phpmv2/
Disallow: /my_points_help.php
Disallow: /to_order.php
Disallow: /cookie_usage.php
Disallow: /specials.php
Disallow: /paiement.php
Disallow: /privacy.php
Disallow: /profile.php
Disallow: /sitemap.php
Disallow: /guestbook.php
Disallow: /guestbook_sign.php
Disallow: /products_new.php
Disallow: /sponsorship.php
Disallow: /reviews.php
Disallow: /popup_search_help.php
Disallow: /track/track/
Disallow: /popup_search_help.php
Disallow: /conditions.php
Disallow: /shipping.php

[Michel]

Salut,

normalement c'est :

User-agent: *
Disallow: /includes
Disallow: /account.php
Disallow: /advanced_search.php
Disallow: /checkout_shipping.php
Disallow: /create_account.php
Disallow: /login.php

...

[Kervano]

Voila je viens de faire la modification, en espérant que cela corrigera ce pb.

[Michel]

Je pense que ça va être bon... reste plus qu'a attendre, un moment tout de même, pour faire les vérif !

[webmasterlamogere]

Tu peux tester avec l'outil pour webmaster google ton fichier avec le lien "robots.txt analyse"

[jeanluc]

Je pense que ça va être bon...

Aucun doute là-dessus ! C'est parfaitement corrigé.

Jean-Luc

[asbel]

Kervano, quel générateur t’a utilisé pour avoir un fichier incomplet ?

[Leonick]

Kervano, quel générateur t’a utilisé pour avoir un fichier incomplet ?

il n'y a pas besoin de générateur, ça se fait avec notepad

[asbel]

oui je sais , c'est la ligne de commentaires qui me laisser croire que le fichier fut généré automatiquement

# These settings will keep spiders from indexing your unwanted pages

[Leonick]

oui je sais , c'est la ligne de commentaires qui me laisser croire que le fichier fut généré automatiquement

# These settings will keep spiders from indexing your unwanted pages

dans ce cas, c'est sur que l'outil est top, s'il oublie le User-agent: *

[rebaj83]

Bonjour,

Je ne pense pas que le user-agent y soit pour quelque chose...

Personnellement j'essaie d'exclure certains repertoires avec:

Code: Tout sélectionner

User-agent: *
Disallow: /monrep/

mais ils apparaissent toujours dans l'index apres un an... que faire?

cela vient-il du fait que d'autres sites pointent toujours vers ces adresses?

merci

[Leonick]

[quote="rebaj83"]mais ils apparaissent toujours dans l'index apres un an... que faire?/quote]l'index de qui ? si c'est yahoo, c'est normal, ils sont incapables de supprimer des url

[Kervano]

Effectivement cela ne retire toujours pas mes pages je ne comprends vraiment pas, cela devient illogique...

[UsagiYojimbo]

Effectivement cela ne retire toujours pas mes pages je ne comprends vraiment pas, cela devient illogique...

Tu peux supprimer une page de ton site présente dans l'index Google directement depuis l'interface webmaster, en plus du robots.txt.

J'ai testé il y a peu, ca fonctionnais pas mal.

[Kervano]

Tu peux supprimer une page de ton site présente dans l'index Google directement depuis l'interface webmaster, en plus du robots.txt.

Pardonnes moi mais je suis encore débutant en la matière, qu'appel tu l'interface webmaster? et comment procéder? de plus je ne désire pas supprimer la page en question, mais simplement ne pas la faire référencer.

Cordialement,
Kervano