Benchmark

TThéa

Un benchmark, c’est un test standardisé qui mesure et compare les performances d’un système d’intelligence artificielle, à partir des mêmes tâches et des mêmes critères. Imaginez deux voitures sur le même circuit, avec le même chargement : leur consommation ou leur tenue de route se compare mieux qu’à partir d’une impression. Pour les modèles d’intelligence artificielle, les tâches peuvent consister à résoudre des problèmes, résumer un texte ou reconnaître une image, et le résultat aide à repérer les points forts et les faiblesses avant un choix technique ou un achat. Mais un bon score ne prouve pas qu’un modèle comprend réellement ce qu’il fait, ni qu’il sera performant dans toutes les situations : il peut surtout avoir appris à réussir les exercices du test.