Méthodologie de l'enquête sur les moteurs de recherche
Pour mener à bien cette enquête qualitative, JDN Solutions a fait exécuter en parallèle par deux testeurs la même série de 25 requêtes, à la fois sur Google, Yahoo Search et MSN Search. Ces requêtes étaient composées de 15 scénarios simples couvrant l'éventail des besoins courants d'un internaute (il s'agissait de requêtes marchandes, de demandes de contenu et d'actualité), et de 10 scénarios complexes (mot rare ou recherche fine).
Les fonctionnalités de "recherche avancée" des moteurs n'ont pas été utilisées. Pour Google, la recherche a été exécutée sur les pages francophones. Pour Yahoo, sur le site Yahoo.fr et pour MSN, sur le site Msn.fr.
A chaque fois, les dix premiers résultats "naturels" affichés (un peu moins parfois dans le cas de scénarios complexes) ont été examinés et évalués. Les liens promotionnels ont eux aussi été notés sur leur pertinence et leur ergonomie.
Les tests ont été effectués du 04 au 27 avril 2006. |
Critères d'évaluation
Les testeurs ont évalué les performances des moteurs en fonction des critères suivants :
Pertinence des 10 premiers résultats naturels
 la pertinence des trois premiers résultats
la pertinence des sept derniers résultats
le taux de résultats redondants (ou provenant du même site)
le taux de liens brisés (un lien brisé détecté équivalant à une note de 0)
le taux de pages parasites (publicitaires ou satellites)
Pertinence et ergonomie des liens promotionnels
la pertinence des liens promotionnels éventuellement affichés
la gêne occasionnée par ces liens promotionnels
Notation
Chaque critère a été noté sur 10. Chaque requête a obtenu une note globale sur 140 (7 critères notés sur 10 par 2 testeurs).
Chaque
moteur de recherche a obtenu une note sur 3 500 points (140 x 25 scénarios), finalement ramenée à une note sur 10. |
