Restriction dans robots.txt mais toujours indexé

**le Ven Fév 04, 2011 17:18**

Bonjour à tous,
J'ai mis des restrictions dans mon robots.txt pour google pour qu'il ne référencement pas certains dossier il y a 1 mois.
je précise que ces urls étaient déjà indexées dans google depuis 3 mois.
Dans mon webmastertool, google prend bien en compte ces restrictions, mais cela fait 1 mois et les urls sont toujours présentent dans les résultats de recherche google. Ca m'arrange pas car c'est fait 1 mois que j'essaie de sortir de la sandbox (sandbox 2 selon webrankinfo

) a cause d'urls en duplicate content.
Qu'en pensez vous ?
Je dois être patient ? merki

Pour info: j'ai 620 urls de référencés => pour l'instant en restriction il y en a 320, il faudrait qu'il m'en reste 50 max.

**le Dim Fév 06, 2011 13:31**

Le robot est repassé depuis sur ces pages ?

**le Dim Fév 06, 2011 14:47**

Oui, mais pas sur toutes, seulement sur 300 pages.

**le Dim Fév 06, 2011 17:27**

dreadstock a écrit:Oui, mais pas sur toutes, seulement sur 300 pages.

Alors, c'est que le robots.txt n'est pas correct, parce que Googlebot ne repasse pas sur les URL exclues par robots.txt.

Tu peux nous montrer ton robots.txt ?

Jean-Luc

**le Dim Fév 06, 2011 17:37**

dreadstock a écrit:Bonjour à tous,
J'ai mis des restrictions dans mon robots.txt pour google pour qu'il ne référencement pas certains dossier il y a 1 mois.

Tu as juste mis dans le robots.txt (il faut donc attendre la prochaine visite du robots, sauf erreur)

Ou tu as changer le SiteMap.xml aussi et fait une suppression d'URL dans le GWT ?

**le Dim Fév 06, 2011 17:53**

J'ai juste mis dans robots.txt

**le Dim Fév 06, 2011 18:02**

Je pense qu'il pourrait être plus efficace/rapide de virer ces URLs du Sitemap et de les supprimer dans le GWT.

Je viens de le faire sur mon site, prise en compte en 2H.

Attends un avis expert, je débute !

**le Dim Fév 06, 2011 18:18**

dreadstock a écrit:Oui, mais pas sur toutes, seulement sur 300 pages.

J'ai mal lu...

- Il est repassé sur des pages interdites par le robots.txt
OU
- il indexe encore des pages interdites par le robots.txt ?

**le Dim Fév 06, 2011 21:34**

- il indexe encore des pages interdites par le robots.txt ?

**le Dim Fév 06, 2011 23:06**

dreadstock a écrit:- il indexe encore des pages interdites par le robots.txt ?

A priori, tu lui interdis de ré-indexer ces pages à la prochaine visite. C'est tout. Tant qu'il ne revisite pas la page incriminée, il ne la sort pas de l'index.

àmha, il faudrait être plus explicite :
- suppression des URL du SiteMap
- demande de suppression des URLS ou répertoires dans GWT

**le Lun Fév 07, 2011 10:05**

J'ai 600 urls à supprimer alors ? Waiii ca fait beaucoup de boulot ca !

**le Lun Fév 07, 2011 11:06**

Ces page sont indexées normalement ou seules les références à ces pages (lien sans snippet) ?

**le Lun Fév 07, 2011 12:34**

Certaines pages sont indexées normalement mais certaine, seulement avec le lien (pas de description ni title), dans GWT google considère que 350 urls sont bloquées parle robots.txt, mais elles sont toutes encore présentent dans les résultats. C'est très énervant. merci

**le Lun Fév 07, 2011 12:39**

Dans ce cas supprime le robots.txt et à la place utilise la balise meta noindex directement dans le <head> des pages concernées.

**le Lun Fév 07, 2011 13:28**

Ca impossible, j'utilise joomla, est je ne peux pas pour chaque page mettre un no-index. J'ai fais du canonical sur les pages d'origine, et pour le robots.txt, je reste comme ca et on verra avec le temps. Je pense que si je patiente encore un peu, ca devrait le faire.

Restriction dans robots.txt mais toujours indexé

Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Re: Restriction dans robots.txt mais toujours indexé

Formation recommandée sur ce thème :

Lectures recommandées sur ce thème :

Qui est en ligne