Доклад руководителя группы асессоров Яндекса Ольги Мегорской, который был представлен на Я.Субботнике в Санкт-Петербурге 3 декабря 2011 года.
Доклад посвящен оценке качества поиска и тому, как для этого используется работа асессоров и экспертные оценки.
Служба асессоров Яндекса – это развитая система сбора экспертных оценок. За время работы над ней можно узнать много интересного не только о качестве поиска Яндекса, но и о самих асессорах. Ольга делится своими наблюдениями о том, чем отличаются оценки оптимистов и пессимистов и чем вторые лучше первых; о том, что при попарном сравнении находятся «любители левого» и «любители правого»; о том, как можно автоматически выявить недобросовестного асессора, и еще о некоторых интересных фактах из области экспертной оценки.
Презентацию можно посмотреть здесь.