OpenBMB apresenta o framework mathform para avançar na formalização matemática automatizada

A equipa OpenBMB revelou um novo framework, conjunto de dados e modelo de código aberto, concebidos para melhorar a formalização matemática automatizada. O projeto, denominado MathForm, visa resolver o desafio de permitir que as máquinas interpretem e verifiquem teoremas matemáticos com precisão, através da formalização, um obstáculo fundamental para alcançar a inteligência artificial geral. O framework introduz um mecanismo de construção de dados com recuperação e orientação de verificação, que primeiro extrai as definições necessárias da biblioteca Mathlib e, em seguida, refina a saída através de várias iterações com base no feedback do compilador Lean e nas verificações de consistência semântica. Para apoiar esta iniciativa, a OpenBMB também lançou o conjunto de dados FormalVerse, que contém mais de 367.000 exemplos verificados Lean4 em várias áreas matemáticas. Os resultados experimentais indicam que os modelos treinados no FormalVerse atingiram uma taxa de verificação de consistência de 60,32%, superando significativamente o FineLeanCorpus em 46,53% e o NuminaMath-LEAN em 41,49%. O modelo MathForm-8B, um componente central do projeto, demonstrou um desempenho forte em seis testes de referência, atingindo uma taxa de aprovação de verificação de sintaxe de 88,06% e uma taxa de aprovação de verificação de consistência de 72,37% numa escala de 8 pontos. Notavelmente, o modelo MathForm-8B superou modelos maiores, como o ReForm-32B e o Goedel-Formalizer-V2-32B, apesar de ter apenas um quarto do número de parâmetros deles. Nos subconjuntos mais desafiadores, FATE-H e FATE-X, o modelo atingiu taxas de sucesso de verificação de consistência de 63% e 37%, respetivamente, superando os benchmarks especializados mais fortes em 10 e 12 pontos percentuais. Isto destaca a forte capacidade de raciocínio e correção de erros formais do modelo. O projeto está agora disponível no GitHub em https://github.com/openbmb/MathForm.