Форум по оценке методов автоматического разрешения анафоры: второе информационное письмо

Второе информационное письмо

Форум “Оценка методов автоматического анализа текста”
Разрешение анафоры/кореференции 2013-2014

Приглашение к участию

В 2014 году планируется провести Третий форум по оценке систем автоматической обработки текста. На этот раз темой Форума является автоматическое распознавание анафоры и автоматическое распознавание кореферентных связей. Обсуждение результатов планируется провести в рамках конференции “Диалог-2014”.

Аналогичные дорожки проводятся в рамках таких международных семинаров по оценке NLP, как SemEval 2010, CoNLL 2011, EVALITA 2011 для английского и других европейских языков. Для русского языка семинаров по оценке подходов к разрешению анафоры/кореферентности до сих пор не проводилось.
Приглашаем желающих принять участие в любой из дорожек. Подать заявку и уточнить вопросы, связанные с проведением дорожек, можно по адресу nlprueval@gmail.com. Также приглашаем к сотрудничеству волонтеров для участия в проведении дорожек.
Предварительное обсуждение регламента прошло на круглом столе конференции Диалог’2013.
Новая версия регламента находится по адресу: https://docs.google.com/document/d/1CFi6RyLi0bEFj9FpPqmpNV7tm5SG1VkV7Y1SnQJoIJM/edit#.
Комментарии и предложения можно оставлять непосредственно в документе, либо присылать по адресу nlprueval[эт]gmail.com, либо принять участие в обсуждениях на форуме по адресу http://forum.dialog-21.ru/actualforum.aspx.
Версию разметки золотого стандарта можно посмотреть по адресу http://antec.compling.net/res01/test1.php?b=test1

У нас появилась возможность раздать обучающую коллекцию объемом около 100 текстов: около 1300 анафорических пар (местоимение — антецедент), а также около 1500 кореферентных цепочек. В связи с этим мы сдвигаем сроки.

Новые сроки

заявки на участие до 27 января 2014г.
 
— раздача тренировочной коллекции 27 января 2014г.

— обсуждение деталей регламента до 5 февраля 2014г.
раздача тестовой коллекции  15 февраля 2014г.

прием результатов прогона до 25 февраля 2014г.

Объявление результатов проверки 10 апреля

Вопросы, связанные с подачей статей на конференцию «Диалог», посвященных участию в Форуме, можно уточнить у координаторов Форума (nlprueval[эт]gmail.com)

Форма заявки.

В заявке должно быть указано:
1) название системы распознавания анафоры/кореферентности (на русском и английском языках);
2) автор/организация и контактная информация (email);
3) краткая (1 абзац) характеристика системы; опционально — ссылка на online-ресурс с описанием проекта;
4) предполагаемые дорожки, в которых хотелось бы оценить результаты работы алгоритма.

Просьба тем, кто уже заявил о своем участии, также уточнить отсутствующую в заявке информацию.

Координаторы Форума,

Анастасия Бонч-Осмоловская, Ольга Ляшевская и Светана Толдова

Об авторе Лидия Пивоварова

СПбГУ - старший преподаватель, University of Helsinki - PhD student http://philarts.spbu.ru/structure/sub-faculties/itah_phil/teachers/pivovarova
Запись опубликована в рубрике Конференции. Добавьте в закладки постоянную ссылку.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *