Конференция по пониманию сообщений - Message Understanding Conference

В Сообщения о конференциях (MUC) были инициированы и профинансированы DARPA (Агентство перспективных оборонных исследовательских проектов) для поощрения разработки новых и лучших методов извлечение информации. Характер этого соревнования - множество параллельных исследовательских команд конкурируют друг с другом - потребовал разработки стандартов оценки, например принятие таких показателей, как точность и отзыв.

Темы и упражнения

Только для первой конференции (MUC-1) участник мог выбрать выходной формат для извлеченной информации. Со второй конференции был предписан выходной формат, по которому будут оцениваться системы участников. Для каждой темы были даны поля, которые необходимо было заполнить информацией из текста. Типичными полями были, например, причина, агент, время и место события, последствия и т. Д. Количество полей увеличивалось от конференции к конференции.

На шестой конференции (MUC-6) задача признания названные объекты и Coreference Для названной сущности все фразы в тексте должны были быть помечены как человек, место, организация, время или количество.

Обработанные темы и текстовые источники демонстрируют непрерывный переход от военной к гражданской тематике, что отразило изменение бизнес-интереса к извлечение информации происходящее в то время.

КонференцияГодИсточник текстаТема (домен)
MUC-11987Mil. отчетыОперации флота
MUC-21989Mil. отчетыОперации флота
MUC-31991Новости новостейТеррористическая деятельность в Латинской Америке
MUC-41992Новости новостейТеррористическая деятельность в Латинской Америке
MUC-51993Новости новостейСовместные корпоративные предприятия, производство микроэлектроники
MUC-61995Новости новостейПереговоры по трудовым спорам и преемственности корпоративного управления
MUC-71997Новости новостейАвиакатастрофы и запуски ракет / ракет

Литература

Смотрите также

внешняя ссылка