URL Rewriting et Duplicate Content

[a.nonyme4ever]

Bonsoir,

J'ai un forum phpBB URL Rewriter et je pense avoir pas mal de Duplicate Content.

Quelles sont les modifications que je dois apporter à mon forum afin d'éviter ce problème svp ?

Dois-je modifier le robots.txt ? Si oui, comment ?

Merci d'avance pour votre aide,

Flo

 

[SuperPJ]

Salut,

Je ne connais pas les forums phpBB mais la règle générale est que si tu rewrites les urls de type :

http://www.monsite.com/index.php?a=b&c=d

en :

http://www.monsite.com/a-b-c-d.html

... alors il faut que tu mettes dans ton robots.txt les lignes :

User-agent: *
Disallow: /index.php?

Ainsi les moteurs de recherche ne vont indexer aucune url commençant par :

http://www.monsite.com/index.php?

Pour la syntaxe, tu as un exemple de robots.txt ici :
https://www.google.com/robots.txt

 

[Aquarius]

Si ça peut t'aider voici un exemple de robots.txt pour phpBB rewrité :

User-agent: *
Disallow: /forum/posting 
Disallow: /forum/profile 
Disallow: /forum/privmsg 
Disallow: /forum/viewonline 
Disallow: /forum/groupcp 
Disallow: /forum/memberlist 
Disallow: /forum/search 
Disallow: /forum/login 
Disallow: /forum/faq 
Disallow: /forum/post- 
Disallow: /forum/updates-topic 
Disallow: /forum/stop-updates-topic 
Disallow: /forum/ptopic 
Disallow: /forum/ntopic 
Disallow: /forum/sutra 
Disallow: /forum/mforum 
Disallow: /forum/index.php? 
Disallow: /forum/viewtopic.php? 
Disallow: /forum/viewforum.php?

remplace forum par le dossier d'install de phpbb.

 

[a.nonyme4ever]

Merci beaucoup pour votre aide !

Je vais tacher de regarder tout ça de plus près.

Je suppose aussi que les URLs permanentes des posts sont sources de Duplicate Content, par exemple : https://www.webrankinfo.com/forum/viewt ... htm#396194
= https://www.webrankinfo.com/forum/t/url-rewriting-et-duplicate-content.41261/ ou bien cela ne pose pas de problème ?

Encore merci à vous,

Flo

 

[Kzou]

Salut,

désolé de faire remonter ce topic, mais je veux être sur d'un truc

j'ai une redirection

news.php vers news.html 
news.php?id=1 vers news-1-titre.html
etc...

Si j'ai bien compris, je dois mettre dans mon robots.txt :

Disallow /news.php

qui va eviter aux robots de parcourir toutes les pages commencant par news.php ?

merci

 

[YoyoS]

C'est automatique avec les outils de www.phpbb-seo.com

 

[Kzou]

Mais je parle pas de forum phpbb ?!