google ne respecte pas noindex et les consignes du robot.txt

Consultez la formation au référencement naturel Google de WebRankInfo / Ranking Metrics

Jaki
Nouveau WRInaute
 
Messages: 8
Inscription: Mar Jan 25, 2005 8:17

google ne respecte pas noindex et les consignes du robot.txt

Message le Jeu Sep 08, 2005 13:43

C'est vraiment pénible ça ! je vient de publier 4 sites sur des thématiques différentes (donc des nouveaux sites) et je constate que des url appartenant à des dossiers précisés dans le robot.txt ou comportant des balises noindex, nofolow, noarchive sont systématiquement indexé...
J'ai constaté cela à de nombreuse reprises (je veux dire sur de nombreux sites)

Par exemple :

User-agent: *
Disallow: /noindex/


http://www.google.fr/search?sourceid=na ... hats%2Enet

C'est casse pied : ça fait plein de pages duplicate !

QQ a t il une solution ?
1 - pour supprimer les pages indexées
2 - éviter que cela se reproduise

Merci de toute aide sur le sujet


echanges-liens
WRInaute impliqué
WRInaute impliqué
 
Messages: 351
Inscription: Ven Aoû 26, 2005 15:03

Message le Jeu Sep 08, 2005 13:50

Je confirme et je suis très intéressé aussi par une solution (nous avons tout tenté y compris : <META NAME="GOOGLEBOT" CONTENT="NOINDEX, NOFOLLOW"> et cela, sans résultat...)

csangouard
WRInaute discret
WRInaute discret
 
Messages: 99
Inscription: Jeu Nov 14, 2002 2:55

Message le Jeu Sep 08, 2005 14:02

Et si simplement, ce que l'on prend tous comme une manifestation du duplicate serait un signal de la part de google qui affirme "hé, je connais cette url, mais je ne touche plus à cette page et ne met pas de description" pour telle ou telle raison: interdiction d'indexation, page dupliquée, page redirigée, etc.

Dans ce cas, on distinguerait indexation d'url et indexation de page. Ce qui voudrait dire que Google joue sur les mots avec sa facheuse habitude de tout indexer.


easy_zik
WRInaute impliqué
WRInaute impliqué
 
Messages: 408
Inscription: Lun Juil 07, 2003 9:30

Message le Jeu Sep 08, 2005 14:16

effectivement aucune de Tes pages "noindex/" n'ont leur contenu d'indexé...

peut-être que Google fait qd même des requètes HEAD sur ces pages, mais pas de requètes GET...


HawkEye
Modérateur
Modérateur
 
Messages: 15034
Inscription: Lun Fév 23, 2004 12:33

Re: google ne respecte pas noindex et les consignes du robot

Message le Jeu Sep 08, 2005 15:04

Jaki a écrit:...des dossiers précisés dans le robot.txt ...


...avec un "s" à robotS.txt ça marche mieux...

perso, j'ai aucune page sous robots.txt >> disallow qui n'est indexée.

aucune exp. en matière de noindex,nofollow (je préfère fourrer la bête...)

shrom
WRInaute passionné
WRInaute passionné
 
Messages: 865
Inscription: Lun Juil 05, 2004 22:37

Message le Jeu Sep 08, 2005 15:58

Une explication ici


echanges-liens
WRInaute impliqué
WRInaute impliqué
 
Messages: 351
Inscription: Ven Aoû 26, 2005 15:03

Message le Jeu Sep 08, 2005 16:09

Bravo, exact. Merci pour l'information.

Foxus
WRInaute accro
WRInaute accro
 
Messages: 1404
Inscription: Dim Jan 09, 2005 21:21

Message le Jeu Sep 08, 2005 16:26

quans vous faite une recherche francophone, voyez vous encore les page qu'il faut pas ou non ?


Formation recommandée sur ce thème :

Formation Référencement naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.

Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.

Lectures recommandées sur ce thème :



Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités