Инструкция для асессора

(дорожка по аннотированию)

Целью работы является выявление множества документов, которые содержат полезную (релевантную) информацию при поиске по заданному запросу.

Каждое задание состоит из:

Технически задание распространяется в виде одного файла с описанием задания (с расширением .rtska)

Результаты выполнения задания будут сохранены в файле с расширением .res.

Общие правила

Пожалуйста, придерживайтесь следующих правил при проведении оценки:

Задачей асессора является оценить по аннотации документа наличие в самом документе полезной информации для заданной информационной потребности. Поэтому, представьте себе, что поисковая система вернула вам такое описание документа в списке результатов, - стали ли бы вы загружать и смотреть на сам документ?

Шкала оценки

Для оценки используется следующая шкала: