A/B testing

[jazar]

Bonjour,

Est-ce que certains d'entre vous utilisent les méthode de tests A/B dans leurs campagnes de référencement.

J'ai écris un article sur le sujet, et j'aimenrais savoir ce que les membres de WebRankInfo en pensent: http://www.jazar-international.com/articles/ab-testing.html

[demoore]

Très bel article, c'est un concept interessant dont j'avais entendu parler sans trop savoir de quoi il s'agissait.
J'ai hâte de connaître les résultats de cette étude avant d'envisager de faire la même chose sur l'un de mes projets.

[Grantome]

Rien compris...

C'est quoi un test A/B ?

[jazar]

Pour faire court, c'est une facon de tester 2 designs différent pour une même page.

Disons que tu optimise ta page pour "acheter ipod". Tu veux qu'une fois le visiteur atterit sur cette page, il ajoute ton ipod à son pannier.

Maintenant, le design de ta page a une énorme influence sur le nombre de visiteurs qui vont rajouter cet ipod.

Donc le but du jeu est de pouvoir evaluer differents design, et analyser les resultats.

Le principe de A/B testing est donc de présenter different design de facon "simultanée" (le design utilisé change de façon aléatoire en fonction du visiteur), et d'enregistrer le taux de visiteurs qui ajoutent l'ipod à leur pannier, en fonction du design affiché.

Taux de conversion = nombre de visiteurs qui ajoutent l'ipod a leur pannier/nombre total de visiteur.

Si ton premier design entraine un taux de conversion de 5% et le deuxieme un taux de conversion de 10%, tu sais qu'il faut garder le deuxieme, et jeter à la poubelle le premier.

[Grantome]

Ok

[jazar]

Bon, ca ne semble pas exciter les foules.

[david96]

C'est que ta méthode demande du boulot et peut être une attente qui aura était veine... Car si j'ai bien compris en gros tu présentes aléatoirement plusieurs désignes pour ton site et tu gardes celui qui a eu le plus de succès...

Donc faut se taper plusieurs désigne...
Attendre avant de faire un bilan...
Et enfin conclure !

C'est intéressant mais cela demande du temps et du travail ! Le hic c'est que je doute un tantinet de la véracité de ce genre de sondage !

Est-ce que toi même qui a je pense exploité cette méthode, tu as obtenu de bon résultat par la suite ?

Si c'est le cas, ça vaut peut être la peine de mettre les mains dans le cambouis

[jazar]

A/B testing demande effectivement du boulot (peut-etre pas la ou on croit cependant).

Il ne faut surtout pas imaginer avoir à refaire un design entier - tout au contraire.

Le but des tests A/b est d'isoler un élément, et de tester differentes configurations possible (la position, couleur, style d'un bouton), le texte affiché, etc ...

La méthode est aujourd'hui utilisé par la majorité des "gros" sites.

Exemple1: tu as un formulaire sur ton site, et ton taux de conversion est de 5%. Pourquoi pas changer la disposition des champs pour l'améliorer? Le A/B testing te permet de mettre en concurrence les deux formulaires, et de déduire des statistiques obtenus la meilleure solution possible.

Exemple2: si tu utilise les campagnes adwords, tu peux mettre en concurrence plusieurs bannière. Le principe est exactement le même ici - il te suffit de mettre en roation plus version de la phrase d'accroche sur ta page, et sélection la phrase qui conduit au meilleur taux de conversion.

Le sujet est très riche, et je pense qu'il est aujourd'hui impératif pour un webmaster (quelque soit la taille du/des site(s) qu'il gere) de s'y pencher sérieusement.

Tu peux utiliser le script cité ci-dessus, qui te permettra déjà de jouer avec les style (et positionnement des éléments graphiques si ton site est suffisamment souple). en remplacant les feuilles de style par des fichier texte, tu peux egalement faire tourner differentes versions de texte (déconseillé vu ce que cela implique au niveau du code de ton site...mais possible).

[david96]

Vu sous cet angle effectivement c'est intéressant !

En fait ça a un côté bêtas testeurs qq part, mais à échelle plus grande !

[WebRankInfo]

c'est intéressant mais tous tes exemples concernent surtout l'interface utilisateur et non le référencement, je me trompe ?

[Suede]

La meme chose peut être fait pour l'intégration des adsenses par exemple.

François

[jazar]

Exactement - et sans aller chercher trop loin, les compétences d"A/B testeur" vont rejoindre rapidement l'attirail du parfait référenceur - des formations voient déjà le jour, offrant des certificats speciaux pour les référenceurs:

http://www.marketingexperiments.com/certification.asp

[alcyane]

En Allemagne,
Je sais que T.c.h.i.b.o (qui est juste derrière Amazon) possède tout un système pour utiliser cette méthode A/B.

Car il faut deux fronts et le système d'analyse qui va bien derrière.

C'est très puissant, notamment si on le fait de façon bien ordonnée : je teste 2 hypothèses à la fois, pas plus, et dans les mêmes conditions
=> Je conserve celle avec le meilleur résultat, et je vérifie sur un labs de temps suffisant qu'effectivement j'ai bien augmenté mes performances, avant de passer à un nouveau test.

Lors de la phase de test, il est très très important de bien prendre en compte les conditions extérieures, car comme toujours il faut être dans des conditions identiques, hors la modification du test.
Et ensuite ne pas se tromper dans ses statistiques...
En génétique on utilise la méthode du X² pour vérifier si deux populations de résultats sont identiques ou pas...

Par contre plutôt que de parler de design, je parlerais d'ergonomie... Car le design est plutôt une question d'esthétique, tandis que l'ergonomie va jouer sur les performances et le taux de transformation.

(D'ailleurs, pour le design, ce que j'ai pu découvrir chez couplouf.com, c'est que : plus c'est laid, plus ça transforme... Si, si ça marche aussi dans ce sens )

[jazar]

c'est vrai, il faut faire la distinction entre ergonomie et design - mais tu donnes toi meme l'exemple que le design joue un role sur la conversion egalement

tu peux nous en dire plus sur la methode x2?

[Suede]

c'est vrai, il faut faire la distinction entre ergonomie et design - mais tu donnes toi meme l'exemple que le design joue un role sur la conversion egalement

tu peux nous en dire plus sur la methode x2?

Le χ2 (Khi-deux) est un test de statistiques qui permet de comparer des pourcentages si je me souviens bien.

Plus d'info sur le Khi-deux