Nous research ajusta Qwen3.8-27B para reducir significativamente los sesgos relacionados con el estado en arete-27b
Nous Research ha introducido Arete-27B, un modelo de código abierto derivado de Alibaba's Qwen3.8-27B a través del ajuste fino supervisado. Esta modificación tiene como objetivo eliminar los marcos estatales chinos de las respuestas del modelo. La evaluación en la prueba de 803 indicaciones de Nous mostró una reducción drástica en las respuestas que contenían propaganda, pasando del 22% al 0,9%.
El proceso de ajuste fino implicó el entrenamiento con aproximadamente 52,8 millones de tokens con una ventana de contexto de 64k durante dos épocas. El proceso utilizó un modelo maestro de código abierto llamado Inkling de Thinking Machines, ya que Nous buscaba evitar las restricciones de uso asociadas con otros modelos como Nemotron 3 Ultra. El resultado Arete-27B mantiene las capacidades de agente de la clase Qwen al tiempo que elimina la alineación con el estado.
Las métricas de rendimiento mostraron mejoras en todos los aspectos; el valor medio aumentó de 2,32 a 2,98, y en la categoría de libertad de expresión, el valor de fact aumentó de 0,89 a 2,44. Si bien la puntuación de Hermes Bench experimentó una ligera disminución de 65,77% a 65,60%, la puntuación de Terminal-Bench-2.1 mejoró de 67% a 70% dentro del entorno de pruebas de Nous. Los pesos del modelo están disponibles en Hugging Face bajo la licencia Apache 2.0.