Guia para construir sistemas de resposta a perguntas de domínio aberto

Este resumo técnico apresenta abordagens para construir sistemas que respondem perguntas factuais em diversos domínios de conhecimento sem contexto específico de domínio. O artigo distingue resposta a perguntas de domínio aberto de tarefas de compreensão de leitura, onde contexto é explicitamente fornecido. Múltiplas arquiteturas são examinadas incluindo aquelas que aproveitam fontes de conhecimento externo como Wikipedia e abordagens de livro fechado operando apenas a partir de parâmetros de modelo. O guia discute metodologia de avaliação para tarefas de resposta a perguntas factuais e examina esquemas de classificação para níveis de dificuldade de perguntas. Considerações de implementação abrangem o desafio de fine-tuning de modelos em datasets comuns de QA e a importância de distinguir entre desempenho em-distribuição e efetividade no mundo real. Aplicações práticas em chatbots e assistentes de IA são exploradas.