Conferência de compreensão da mensagem - Message Understanding Conference
As Message Understanding Conferences ( MUC ) foram iniciadas e financiadas pela DARPA (Defense Advanced Research Projects Agency) para encorajar o desenvolvimento de novos e melhores métodos de extração de informação . O caráter dessa competição - muitas equipes de pesquisa concorrentes competindo entre si - exigia o desenvolvimento de padrões de avaliação, por exemplo, a adoção de métricas como precisão e recall .
Tópicos e exercícios
Apenas para a primeira conferência (MUC-1) o participante poderia escolher o formato de saída das informações extraídas. A partir da segunda conferência, o formato de saída, pelo qual os sistemas dos participantes seriam avaliados, foi prescrito. Para cada tópico foram fornecidos campos, os quais deveriam ser preenchidos com informações do texto. Os campos típicos eram, por exemplo, a causa, o agente, a hora e o local de um evento, as consequências, etc. O número de campos aumentou de conferência para conferência.
Na sexta conferência (MUC-6) foi adicionada a tarefa de reconhecimento de entidades nomeadas e co-referência . Para a entidade nomeada, todas as frases no texto deveriam ser marcadas como pessoa, local, organização, tempo ou quantidade.
Os tópicos e fontes de texto, que foram processados, mostram um movimento contínuo de temas militares para temas civis, o que espelhava a mudança de interesse empresarial na extração de informações que ocorria na época.
| Conferência | Ano | Fonte do Texto | Tópico (domínio) |
|---|---|---|---|
| MUC-1 | 1987 | Mil. relatórios | Operações de Frota |
| MUC-2 | 1989 | Mil. relatórios | Operações de Frota |
| MUC-3 | 1991 | Reportagens | Atividades terroristas na América Latina |
| MUC-4 | 1992 | Reportagens | Atividades terroristas na América Latina |
| MUC-5 | 1993 | Reportagens | Joint Ventures Corporativas, Produção Microeletrônica |
| MUC-6 | 1995 | Reportagens | Negociação de Disputas Trabalhistas e Sucessão de Gestão Corporativa |
| MUC-7 | 1997 | Reportagens | Aviões colidem e lançamentos de foguetes / mísseis |
Literatura
- Ralph Grishman, Beth Sundheim: Conferência de Entendimento da Mensagem - 6: Uma Breve História. In: Proceedings of the 16th International Conference on Computational Linguistics (COLING), I, Copenhagen, 1996, 466-471.
Veja também
links externos