OpenBMB presenta el marco mathform para avanzar en la formalización matemática automatizada

El equipo de OpenBMB ha presentado un nuevo marco, conjunto de datos y modelo de código abierto, diseñados para mejorar la formalización automatizada de las matemáticas. El proyecto, denominado MathForm, tiene como objetivo abordar el desafío de permitir que las máquinas interpreten y verifiquen con precisión los teoremas matemáticos a través de la formalización, un obstáculo clave para lograr la inteligencia artificial general. El marco introduce un mecanismo de construcción de datos con refuerzo y guiado por la verificación, que primero extrae las definiciones necesarias de la biblioteca Mathlib y luego refina la salida a través de múltiples iteraciones basadas en los comentarios del compilador Lean y las comprobaciones de coherencia semántica. Para apoyar esta iniciativa, OpenBMB también ha lanzado el conjunto de datos FormalVerse, que contiene más de 367.000 ejemplos verificados de Lean4 en varios dominios matemáticos. Los resultados experimentales indican que los modelos entrenados en FormalVerse lograron una tasa de comprobación de coherencia del 60,32%, superando significativamente a FineLeanCorpus (46,53%) y NuminaMath-LEAN (41,49%). El modelo MathForm-8B, un componente clave del proyecto, demostró un buen rendimiento en seis pruebas de referencia, logrando una tasa de aprobación de comprobación de sintaxis del 88,06% y una tasa de aprobación de comprobación de coherencia del 72,37% en una escala de 8 puntos. Notablemente, el modelo MathForm-8B superó a modelos más grandes como ReForm-32B y Goedel-Formalizer-V2-32B, a pesar de tener solo un cuarto del número de parámetros. En los subconjuntos más desafiantes, FATE-H y FATE-X, el modelo logró tasas de éxito de comprobación de coherencia del 63% y 37%, respectivamente, superando a los mejores benchmarks especializados en 10 y 12 puntos porcentuales. Esto destaca las sólidas capacidades de razonamiento y corrección de errores formales del modelo. El proyecto ahora está disponible en GitHub en https://github.com/openbmb/MathForm.