Дорожка контекстно-зависимого аннотирования текстовых документов
РОМИП

 Новости 
 О проекте 
 Манифест 
 Приглашение к участию 
 Общие принципы 
 Участие в семинаре 
 График 
 Участники 
 Дорожки 
 Тестовые коллекции 
 Таблицы 
 Архив 
 Публикации 
 FAQ 
 Форум 

Switch to EnglishSwitch to English
 

Дорожка контекстно-зависимого аннотирования текстовых документов

Задача

Дорожка посвящена оценке методов решения задачи контекстно-зависимого аннотирования текстовых документов.

Общая процедура проведения дорожки стандартна.

Коллекция

Исходный набор данных - объединение коллекций коллекции Narod.ru и коллекции нормативных-документов 2004.

Аннотированию подлежат только документы, упоминающиеся в задании.

Формулировка задания для участвующей системы

Система-участник получает колекции Narod.ru и Legal и набор заданий вида "запрос и документ" (всего 64365). Система должна предоставить аннотацию этого документа по этому запросу.

Набор заданий был создан на основе множества запросов, которые оценивались при проведении РОМИП'2003-РОМИП'2006.

Ответом системы для задания является фрагмент текста не более 300 символов без HTML разметки.

Методология оценки

Методология оценки находится в стадии обсуждения.

Форматы данных