Comment interdire le crawl des pages de faibles valeurs (Noindex ; Nofollow ; Disallow ?)

Règles du forum
Attention ce forum est destiné avant tout à ceux qui découvrent le référencement. Les membres qui auront l'amabilité de répondre à leurs questions sont priés de rester courtois, polis, indulgents, patients et pédagogues... Merci d'avance !

Par ailleurs, inutile d'utiliser ce forum uniquement pour obtenir des liens vers vos sites, les liens sont désactivés pour le référencement (nofollow).

Consultez la formation au REFERENCEMENT naturel Google de WebRankInfo / Ranking Metrics

thomask
WRInaute discret
WRInaute discret
 
Messages: 50
Enregistré le: 19 Jan 2017

Comment interdire le crawl des pages de faibles valeurs (Noindex ; Nofollow ; Disallow ?)

Message le Mer Mar 22, 2017 11:38

Lors de crawl sur mon site, je me suis rendu compte que j'avais presque 30 000 pages, pour seulement 6 000 produits.

Pour chacun de mes articles, plusieurs url sont créés : recommandé produit X à un ami, détail de livraison pour produit X, vous avez à une question sur produit X, etc...

Ces nouvelles pages sont spécifiques à chaque produit d'où mes 30 000 pages.

En plus d'être nombreuses elles sont très pauvres et impactent la qualité moyenne de mon site et son budget crawl.

Je veux les cacher aux yeux de Google définitivement.

Comment faire ?

Es-ce que si j'utilise les balises "noindex" et "nofollow" pour les liens concernés suffit ou dois-je également utiliser l'attribut "disallow" dans le robot.txt (que je ne maîtrise pas vraiment).


karak
WRInaute occasionnel
WRInaute occasionnel
 
Messages: 360
Enregistré le: 6 Aoû 2005

Re: Comment interdire le crawl des pages de faibles valeurs (Noindex ; Nofollow ; Disallow ?)

Message le Mer Mar 22, 2017 19:51

Hello,

Le robots.txt permet d'interdire le crawl
L'attribut nofollow sur un lien indique à Google de ne pas transmettre de popularité au lien
Le balise meta robots noindex indique à Google de ne pas indexer une page
Une page en noindex sera généralement moins souvent crawlée que les pages indexées

J'espère que ces informations te seront utiles.


yule
WRInaute occasionnel
WRInaute occasionnel
 
Messages: 288
Enregistré le: 23 Juil 2004

Re: Comment interdire le crawl des pages de faibles valeurs (Noindex ; Nofollow ; Disallow ?)

Message le Mer Mar 22, 2017 20:28

karak a écrit:J'espère que ces informations te seront utiles.


Sinon un peu de lecture

Courage :wink:

thomask
WRInaute discret
WRInaute discret
 
Messages: 50
Enregistré le: 19 Jan 2017

Re: Comment interdire le crawl des pages de faibles valeurs (Noindex ; Nofollow ; Disallow ?)

Message le Jeu Mar 23, 2017 9:49

karak a écrit:Hello,

Le robots.txt permet d'interdire le crawl
L'attribut nofollow sur un lien indique à Google de ne pas transmettre de popularité au lien
Le balise meta robots noindex indique à Google de ne pas indexer une page
Une page en noindex sera généralement moins souvent crawlée que les pages indexées

J'espère que ces informations te seront utiles.


yule a écrit:
karak a écrit:J'espère que ces informations te seront utiles.


Sinon un peu de lecture

Courage :wink:


Merci pour vos réponses. J'avais lu cet article et ce genre d'information. Mais comme je ne maîtrise pas le robot.txt et que je ne veux pas prendre le risque de me saborder, je voulais savoir si ajouter disallow pour les liens concernés était essentiel ou non.

J'ai l'impression que oui...


Formation recommandée sur ce thème :

Formation REFERENCEMENT naturel Google : apprenez une méthode efficace pour optimiser à fond le référencement naturel dans Google de façon durable... Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.

Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.

Lectures recommandées sur ce thème :