LLM juge

TThéa

Un LLM juge, c’est un grand modèle de langage utilisé pour évaluer les réponses produites par une intelligence artificielle, selon des critères définis à l’avance. Imaginez deux copies à corriger : au lieu de lire chaque réponse à la main, on demande au modèle de comparer leur clarté, leur exactitude ou leur pertinence, puis d’expliquer son appréciation. Cette méthode peut aider à tester rapidement un assistant, par exemple en vérifiant s’il répond correctement à des questions ou s’il suit une consigne. Elle est utile pour repérer des défauts et comparer des versions, mais elle ne transforme pas le modèle en arbitre impartial. Il peut se tromper, favoriser certaines formulations ou passer à côté d’une erreur subtile ; ses évaluations gagnent donc à être vérifiées par des personnes et confrontées à d’autres méthodes.