Blind test pertinence des moteurs de recherche

[MagicYoyo]

J'en avais parlé plusieurs fois sans jamais remettre la main dessus : ayé !
Un blind test qui demande aux testeurs de noter (en aveugle donc) les résultats issus de plusieurs moteurs de recherche et de dterminer lequel est le plus pertinent... des résultats assez étonnants :
http://www.rustybrick.com/rustysearch-results.php

[Aye-Aye]

Assez étonnants, c'est le moins que l'on puisse dire... mais le lien est intéressant...
Ask jeeves...j'avais oublié son existence... Allez pour le plaisir, j'ai lancé 2-3 requêtes qu me sont chères... heureux de constater mon positionnement... mais d'ici dire qu'il est pertinent...

[HawkEye]

Note: Jeeves a pris sa retraite...

C'est "Ask tout court" maintenant hein

http://www.jeevesretirement.com/desk/

[Cendrillon]

cela semble rejoindre les résultats trouvés par Jean Veronis dans son étude comparative ...

[Aye-Aye]

Etude intéressante... et bien plus explicite que le 1er lien donné...
L'idée du blind test est intéressante mais je crois que l'intro. du document donné par Cendrillon soulève un pb important :
Qu'appelle-t-on la pertinence des résultats retournés ?
Peut-on se mettre d'accord sur une définition de cette pertinence lorsque lon sait à quel point elle est subjective et dépend de la nature des besoins en info. des utilisateurs des moteurs de recherche...
Si je tape Téquila:
Est-ce que je jugerais un résultat pertinent parce qu'il me renvoie vers un site institutionnel ? un musée de la tequila ? un recette de la téquila ?...