Guía para construir sistemas de respuesta a preguntas de dominio abierto

Este resumen técnico presenta enfoques para construir sistemas que responden preguntas factuales en diversos dominios de conocimiento sin contexto específico del dominio. El artículo distingue la respuesta a preguntas de dominio abierto de tareas de comprensión de lectura, donde se proporciona contexto explícitamente. Se examinan múltiples arquitecturas incluyendo las que aprovechan fuentes de conocimiento externo como Wikipedia y enfoques de libro cerrado que operan solo a partir de parámetros del modelo. La guía discute metodología de evaluación para tareas de respuesta a preguntas de hechos y examina esquemas de clasificación para niveles de dificultad de preguntas. Las consideraciones de implementación abordan el desafío de ajuste fino de modelos en conjuntos de datos QA comunes y la importancia de distinguir entre el desempeño en-distribución y la efectividad del mundo real. Se exploran aplicaciones prácticas en chatbots y asistentes de IA.