Google publie Harness²

LLéna

Google Research publie Harness² sous licence Apache 2.0. Ce cadre vise à améliorer les agents en ajustant leurs prompts, leurs outils, leur mémoire et leurs scripts, sans modifier les poids du modèle. Harness² s’appuie sur 2 boucles complémentaires. La première teste et combine des changements pour la tâche en cours ; la seconde conserve des améliorations et des leçons pour guider les tâches suivantes. Les modifications sont enregistrées dans des fichiers lisibles et comparables à l’original, avec les raisons de leur adoption. Le cadre peut aussi être affiné sans connaître la bonne réponse à la tâche. Les évaluations rapportent des gains maximaux de 11,5 points sur des tâches de bureautique, de navigation sur le web et de programmation, et de 4,5 points sur des tâches professionnelles. Une tâche juridique affiche un gain maximal de 11,8 points, mais il s’agit d’un score partiel. Ces chiffres sont des maxima, pas une promesse de progression pour chaque tâche. Harness² vise donc à améliorer la façon dont un agent travaille, plutôt que les paramètres internes du modèle. Google Research publie ce cadre en open source. Ses deux boucles servent à tester des ajustements pour une tâche et à conserver des améliorations pour les suivantes.