Google AI lança o envharness para transformar ambientes estáticos em espaços de treinamento dinâmicos

A Google AI introduziu o EnvHarness, uma camada programável que transforma ambientes de agentes estáticos em mundos de treinamento adaptativos. A ferramenta permite que os agentes LLM aprendam de forma mais eficaz a partir de ambientes interativos, ajustando dinamicamente o processo de treinamento. O EnvHarness envolve os ambientes existentes com componentes plug-in que modificam o início do episódio, as ações do agente e as observações, sem alterar o simulador ou as tarefas subjacentes. Esta abordagem é concebida para abordar as limitações dos ambientes estáticos, que não conseguem adaptar-se às capacidades em evolução de um agente. A equipa de investigação testou o EnvHarness em cinco benchmarks em quatro domínios, reportando melhorias significativas no desempenho. As competências adquiridas através deste método apresentaram ganhos de até 9,0 pontos nas tarefas mantidas, com uma redução de 9,8% nos passos de execução. A ferramenta está disponível sob a licença Apache-2.0 e suporta seis ambientes, com uma nova interface de benchmark que requer apenas um ambiente reconfigurável. O EnvRigger, uma ferramenta automatizada dentro do EnvHarness, identifica falhas nos rollouts de políticas e gera componentes para corrigi-las. O sistema é independente de políticas, permitindo um treinamento flexível e eficiente. O artigo destaca que o EnvHarness supera os geradores específicos de domínio, demonstrando o seu potencial para melhorar a adaptabilidade e a eficácia dos ambientes de treinamento de IA.