Google apresenta o toolgrad: um novo framework para gerar dados de uso de ferramentas com quase perfeição

A Google Research, em colaboração com a Universidade de Tóquio, RIKEN AIP e Tohoku University, apresentou o ToolGrad, um framework para gerar dados de uso de ferramentas com uma taxa de aprovação de 99,8%. A abordagem inverte os métodos tradicionais, construindo primeiro uma cadeia de uso de ferramentas verificada através da execução de API e, em seguida, gerando uma consulta do usuário correspondente. Modelos Gemma-3, ajustados no conjunto de dados ToolGrad-500, superaram modelos existentes no Berkeley Function Calling Leaderboard, um teste fora da distribuição. O framework é de código aberto, com código sob a licença Apache-2.0 e modelos no Hugging Face. A equipe o avaliou em relação ao banco de dados API ToolBench, que inclui mais de 16.000 APIs do mundo real, relatando uma taxa de falha de 0,2%. O projeto inclui scripts de reprodução para BFCL V1 e V2, disponíveis no GitHub e no Google Research Blog. O ToolGrad utiliza quatro módulos sequenciais, produzindo uma consulta do usuário, um fluxo de API verificado e uma resposta final por iteração. A configuração padrão executa 10 iterações sobre 50 APIs amostradas por fluxo de trabalho. A eficiência e a precisão do sistema o tornam uma alternativa promissora aos métodos existentes, que frequentemente não conseguem produzir resultados confiáveis. A pesquisa enfatiza a importância de dados de alta qualidade e verificados para treinar modelos de linguagem grandes para usar ferramentas de forma eficaz.