Якоб Нильсен сделал замечание на сравнение трёх американских и трёх французских поисковых машин: согласно исследованиям движения зрачков пользователя интернета при просмотре результатов поисковой машины, он сначала бегло просматривает несколько (4-5) первых результатов выдачи, прежде чем кликнуть на лучший по его мнению.
Имея в виду это замечание, оценки каждой поисковой машины были пересмотрены следующим образом: для каждой страницы с результатами среди первых 5 и 10 результатов выбиралась ссылка с максимальной оценкой релевантности. Затем находилось среднее для страниц по всем тестовым запросам. При таком подсчёте Yahoo опередила Google:
| поисковик | Max(10) | Max(5) |
|---|---|---|
| Dir.com | 3.4 | 2.9 |
| Exalead | 4.1 | 3.7 |
| 4.3 | 4.1 | |
| MSN | 4.2 | 3.8 |
| Voilà | 3.6 | 2.5 |
| Yahoo | 4.5 | 4.1 |
//Aixtal