Limites du fichier robots.txt 100 lignes pour GOOGLE
3 messages • Page 1 sur 1
Consultez la formation au référencement naturel Google de WebRankInfo / Ranking Metrics
-
afrolatino.net - WRInaute discret

- Messages: 66
- Inscription: Jeu Mai 27, 2004 6:19
Limites du fichier robots.txt 100 lignes pour GOOGLE
Supprimer des pages, des sous-répertoires ou des images à l'aide d'un fichier robots.txt.
http://services.google.com:8882/urlconsole/controller
J'ai testé la fonctionnalité de suppression d'url par le robots.txt de google
cela fonctionne tres bien en un peu moins de 24h
mais par contre il y a une limite de nombre de ligne dans le robots.txt qui est de 102 Lignes
au dela google nous le signale par un message lors de la soumission du fichier robots.txt
es ce que cela est une limite particulière de google ou de l'utilisation generale du fichier robots.txt, je fais des recherches mais je n'ai trouve aucune information a ce sujet là ???
j'ai plus 5700 urls en duplicate content a supprimer
http://www.google.fr/search?num=100&hl= ... cher&meta=
et pour l'instant c'est la methode la pus rapide pour les supprimer de l'index de google
http://services.google.com:8882/urlconsole/controller
J'ai testé la fonctionnalité de suppression d'url par le robots.txt de google
cela fonctionne tres bien en un peu moins de 24h
mais par contre il y a une limite de nombre de ligne dans le robots.txt qui est de 102 Lignes
au dela google nous le signale par un message lors de la soumission du fichier robots.txt
es ce que cela est une limite particulière de google ou de l'utilisation generale du fichier robots.txt, je fais des recherches mais je n'ai trouve aucune information a ce sujet là ???
j'ai plus 5700 urls en duplicate content a supprimer
http://www.google.fr/search?num=100&hl= ... cher&meta=
et pour l'instant c'est la methode la pus rapide pour les supprimer de l'index de google
- raspoutine59
- WRInaute occasionnel

- Messages: 210
- Inscription: Jeu Mar 17, 2005 19:25
LOL t'a qu'a utilisé l'url-rewriting qui dirige toutes les urls que tu veux plus sur un script PHP qui ne fera rien d'autres qu'un redirect permanent
-

Patrice A. - Modérateur

- Messages: 2413
- Inscription: Ven Fév 11, 2005 19:36
Une page 404 personnalisée menant sur error.php qui va récupérer le REQUEST_URI et le traiter pour renvoyer la bonne page avec un header 301 aurait été la solution.
3 messages • Page 1 sur 1
Formation recommandée sur ce thème :
Formation Référencement naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.
Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.
Lectures recommandées sur ce thème :
- Sortie de GoogleStats v2.01
- Déclarer son fichier sitemap dans le fichier robots.txt
- Robots.txt : Yahoo supporte les options avancées
- Comment gérer simplement les sitemaps de plusieurs sites au même endroit
- Petit changement pour Slurp (le robot de Yahoo)
- Exalead rejoint le protocole Sitemaps.org
- Article sur le fichier .htaccess
- Référencement d'un forum phpBB
- Les crawlers de Yahoo!
- Yahoo Audio Search
Consultez la description détaillée des produits ou services de Google suivants : Google Feed Fetcher, Google Sitemaps
Qui est en ligne
Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités

le forum