Приглашение к Участию
РОМИП

 Новости 
 О проекте 
 Манифест 
 Приглашение к участию 
 Общие принципы 
 Участие в семинаре 
 График 
 Участники 
 Дорожки 
 Тестовые коллекции 
 Таблицы 
 Архив 
 Публикации 
 FAQ 
 Форум 

Switch to EnglishSwitch to English
 

Приглашение к Участию

Шестой российский семинар по Оценке Методов Информационного Поиска

Апрель 2008 - Октябрь 2008
http://romip.ru

К участию приглашаются все заинтересованные лица - как создатели поисковых систем, так и исследователи, занимающиеся проблемами информационного поиска.

Особенностью РОМИП'2008 является включение в программу семинара дорожек поиска по изображениям.

Рассматриваемые задачи

Предварительно, программа семинара в 2008 году будет состоять из следующих секций (дорожек), каждая из которых посвящена оценке методов решения одной из задач информационного поиска:

  • классическая задача поиска по запросу
    • по коллекции нормативно-правовых документов
    • по Веб-коллекции
    • по смешанной коллекции
  • тематическая классификация
    • нормативно-правовых документов
    • Веб-сайтов
    • Веб-страниц
  • фактографический поиск по новостной коллекции
  • структуризация новостного потока
  • контекстно-зависимое аннотирование текстовых документов
  • поиск похожих документов по документу образцу или фрагменту текста
  • вопросно-ответный поиск
  • поиск нечетких дубликатов в коллекции изображений
  • поиск изображений по визуальному подобию

Окончательный список будет сформирован по результатам обсуждения в форуме и поступивших заявок на участие. Подробные описания дорожек и правила проведения обсуждаются в списке рассылки РОМИП и будут опубликованы на сайте семинара.

Наборы данных

При проведении оценки используются следующие коллекции (список может быть расширен):

Процедура и условия участия

Все участники подписывают лицензионные соглашения об использовании коллекций РОМИП исключительно для исследовательских (некоммерческих) целей в рамках проекта РОМИП.

Участник, получив набор данных и заданий, в оговоренные сроки предоставляет результат(ы) выполнения заданий своей системы для их независимой оценки, которая проводится с соблюдением анонимности источника результата. Поощряется также и решение модифицированных задач на основе используемых наборов данных.

Участник обязуется предоставить статью с описанием общих принципов использованного подхода и полученных результатов для публикации в трудах семинара и сделать доклад на очной части семинара.

Предполагается также, что участники компенсируют часть затрат на распространение тестовых корпусов и оценку результатов, пропорционально степени их участия. Компенсировать затраты можно с помощью оплаты организационного взноса или путем выделения ресурсов для проведения оценки.

Результаты тестирования предназначены для использования исключительно в исследовательских целях и не могут быть использованы в маркетинговых или коммерческих целях.

Очный семинар

В 2008 году предполагается совмещение очной части РОМИП с российской конференцией по электронным библиотекам (RCDL'2008), которая пройдет в Дубне с 7 по 11 октября 2008 года.

Правила подачи заявки

Заявка на участие в семинаре РОМИП должна содержать следующую информацию:

  • краткая (в 1-2 абзаца) презентация системы на русском и английском языках (название, Веб-сайт, краткое описание принципов используемого подхода)
  • контактная информация (организация, email контактного лица)
  • список дорожек, в которых Вы заинтересованы принять участие

Заявки принимаются по адресу: romip[AT]romip.ru

Важные даты

Приём заявок на участие: до 12 мая
Распространение заданий: до 26 мая
Предоставление результатов выполнения заданий: с 15 по 15 июля (по графику)
Результаты оценки: после 15 августа (в зависимости от дорожки)
Тексты докладов: 20 сентября
Очная встреча: один из дней в период с 7 октября по 11 октября

О РОМИП

РОМИП - это инициатива по проведению независимой оценки методов информационного поиска, ориентированных на работу с русскоязычной информацией.

Методология организации семинара во многом схожа с известными мировыми аналогами - американским TREC, европейским CLEF и японским NTCIR. Отличительной чертой РОМИП является использование русскоязычных коллекций и активное участие исследователей из России.

Материалы семинаров РОМИП 2003-2007 годов свободно доступны на сайте семинара.

Цели и аудитория

Основными целями Российского семинара по Оценке Методов Информационного Поиска являются:

  • создание и развитие информационных ресурсов, обеспечивающих исследования в области информационного поиска;
  • проведение независимой оценки методов информационного поиска, ориентированных на работу с русскоязычной информацией;
  • формирование среды для исследования проблем информационного поиска на актуальных для российского пользователя задачах;
  • формирование требований к оформлению текстовых коллекций для тестирования;
  • формирование "правил игры" - этических норм представления и использования результатов.

Дополнительными целями проекта являются:

  • консолидация сообщества российских исследователей и разработчиков, занимающихся информационным поиском
  • сотрудничество с зарубежными инициативами по тестированию систем информационного поиска
  • расширение контактов с зарубежными исследователями и разработчиками, занимающимися многоязычным информационным поиском
  • привлечение широкого внимания к проблемам и перспективам информационного поиска и интенсификация исследований в этой области в России
  • создание предпосылок и стимулов для дальнейшего развития участвующих систем с целью совершенствования качества поиска.

Оргкомитет

  • Михаил Агеев (МГУ, Москва)
  • Александр Антонов (Галактика, Москва)
  • Павел Браславский (Яндекс, УГТУ-УПИ, Екатеринбург)
  • Наталья Васильева (HP Labs, Санкт-Петербург)
  • Максим Губин (IAC Search & Media, USA)
  • Борис Добров (УИС РОССИЯ, Москва)
  • Михаил Костин (Mail.Ru, Москва)
  • Игорь Кураленок (Яндекс, ПМПУ СПбГУ, Санкт-Петербург)
  • Игорь Некрестьянов (мат-мех СПбГУ, Санкт-Петербург)
  • Марина Некрестьянова (Nebuad, Санкт-Петербург)
  • Владимир Плешко (RCO, Москва)
  • Илья Сегалович (Яндекс, Москва)
  • Влад Шабанов (Вертикальный поиск, Москва)

Дополнительная информация

Веб сайт семинара - http://romip.ru.

Основным средством общения и координации в РОМИП является электронная почта.

Для получения оперативной информации и обсуждения вопросов, связанных с проведением семинара, приглашаем подписаться на рассылку РОМИП: http://www.yahoogroups.com/group/romip.