Naviguer comme un robot de moteur de recherche

**le Ven Juil 24, 2009 10:50**

Salut,

J'avais vu passer un truc à une époque, mais j'arrive pas à le retrouver, pour naviguer en se faisant passer pour un robot.

Cela permet de voir si un site propose un contenu différent aux humains et aux robots.

Vous savez comment je peux faire ça, où est ce que je peux le trouver ?
Merci
+A+

**le Ven Juil 24, 2009 16:29**

Tu peux essayer avec ça :
http://cgi.w3.org/cgi-bin/html2txt

Cela te montre ce que voient les moteurs.

Mais je ne sais pas si c'est ce que tu recherches exactement ^^

**le Ven Juil 24, 2009 16:56**

Salut,

Merci, je garde en favoris car utile, mais c'est pas ce que je cherchais exactement.

En fait, je cherche a naviguer en renvoyant un user agent de moteur, pour m'assurer que le site visité ne manipule pas son contenu (ne triche pas en fait).

J'en ai marre de certaines pratiques qui consistent à SPAMMER ou autre pour occuper des places indues dans les SERP.

Je veux en fait pouvoir comparer le contenu envoyé aux internautes avec celui renvoyé aux moteurs de recherche pour vérifier qu'un site est clean. C'est de bonne guerre, tout le monde cherche à se positionner, mais y a des limites à tout.

Je sais que ça existe de mémoire, mais j'arrive pas à remettre la main dessus.

Merci

**le Ven Juil 24, 2009 17:10**

Pour ça tu peux passer par l'extension Firefox User Agent Switcher.

**le Ven Juil 24, 2009 17:37**

Voilà qui semblerait correspondre à ce que je cherche.

Je vais regarder, merci beaucoup pour l'info

**le Ven Juil 24, 2009 18:17**

Sinon il y a un browser

lynx

**le Ven Juil 24, 2009 19:08**

Ouais, mais tu vois tout au format texte non ?

Je veux voir le site normalement, mais pouvoir comparer ce qui est envoyé à un humain avec ce qui est envoyé à un robot.

Mais après, c'est sur, faut regarder le code source...

Merci

**le Ven Juil 24, 2009 19:25**

Dans ce cas, comme te le propose UsagiYojimbo, c'est l'extension UA-Switcher pour FireFox

**le Ven Juil 24, 2009 20:03**

En supposant que le site qui fait ce cloaking ne se base pas aussi sur l'IP sinon c'est mort.

**le Ven Juil 24, 2009 20:08**

tu peut aussi regardé le cache

**le Ven Juil 24, 2009 21:04**

Merci de vos réponses, ça va m'aider.

Je regarderais quand j'aurais un peu de temps.
+A+

**le Sam Juil 25, 2009 0:10**

Ne sera pas utile pour détecter un cloaking, mais pour voir "comme les moteurs"
http://www.spider-simulator.com/fr/

**le Sam Juil 25, 2009 12:33**

Merci merci
je regarde
super

**le Mar Juil 28, 2009 17:27**

Déjà, 1° étape : regarde la version en cache. Si tu as la possibilité de voir la page en cache dans les moteurs (surtout sur gg), c'est fort peu probable qu'il fasse du cloacking, ou alors c'est un mauvais blackhat (UA ou IP), si la page n'est pas accessible en cache cela n'implique pas obligatoirement qu'il y a du cloacking, mais c'est probable

**le Mar Juil 28, 2009 18:32**

Impec, merci du tuyau, j'ai pas encore eu le temps de me pencher dessus, mais je vais le faire.

+A+

Naviguer comme un robot de moteur de recherche

Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Re: Naviguer comme un robot de moteur de recherche

Formation recommandée sur ce thème :

Lectures recommandées sur ce thème :

Qui est en ligne