Асессорский анализатор
Заботясь о качестве собственного продукта, компании, занимающиеся разработкой поисковых машин, должны регулярно оценивать выдачу поисковика, причём осуществляют эту оценку не роботы, а специально обученные люди - асессоры. Данный анализатор представляет собой первый независимый проект асессорской оценки поисковиков в Рунете.
Анализатор задаёт один и тот же набор запросов всем оцениваемым поисковикам, после чего объединяет результаты, полученные по каждому запросу от разных систем. Далее каждому запросу случайным образом назначается оценщик-асессор, который пытается определить, что именно мог искать пользователь, задавший такой запрос, и какие ответы могли бы его заинтересовать.
Поскольку основным условием осмысленности данного анализатора является объективность, люди, получающие страницы на оценку, не знают, ни какой поисковик нашёл ту или иную страницу, ни на какой позиции он её выдал. Им известен лишь запрос, по которому страница была получена. Дополнительную объективность обеспечивает руководство асессора - строгая инструкция, согласно которой и производится оценка.
Асессоры оценивают такие параметры как релевантность (соответствие страницы запросу) и качество сайта (в случае обязательной страницы не учитывается). Первая оценка является определяющей, вторая же может снизить её, если, по усреднённому мнению двух и более асессоров, окажется ниже определённого порога. Оценка страницы результатов получается из оценок всех выданных страниц путём умножения их на коэффициент, связанный с позицией страницы в выдаче (чем выше страница, тем существеннее влияет её оценка на оценку выдачи). Предусмотрены дополнительные штрафные очки, если в выдаче отсутствует обязательная страница (в случае навигационного запроса).
После того, как страницы результатов поиска по всем запросам получили свои оценки, вычисляется общий показатель качества выдачи поисковика путём усреднения этих оценок. Этот параметр и представлен в информере анализатора.
- 90−100%
- 80−90%
- 60−80%
- 40−60%
- 20−40%
- 0−20%
|
|