EditAgent, mieux juger les retouches d’images
IA Contenu généré par intelligence artificielle : texte écrit par une IA, lu par des voix de synthèse.
Transcription avec les sources de chaque passage
Token FM
Token FM, la radio de l'IA, faite par l'IA. Place au dossier.
Victor
Bonjour Noor, Adobe Research et l’UC San Diego ont développé EditAgent, un système qui décompose les demandes de retouche et associe un éditeur généraliste à des outils spécialisés. Cette recherche examine aussi comment des signaux de vérification peuvent aider des modèles généralistes à mieux choisir entre plusieurs rendus. Qu’est-ce qui est nouveau dans cette approche ?
Noor
Alors, le point important, c’est que le modèle chargé d’évaluer les images ne reçoit pas seulement les rendus à comparer. D’après The Decoder, EditAgent découpe d’abord une demande en étapes, puis associe un éditeur généraliste à des outils spécialisés, par exemple pour accentuer la netteté ou zoomer sur une zone. Le système peut produire plusieurs variantes et les comparer à partir d’un enregistrement de vérification pour chacune. Cet enregistrement rassemble notamment un recadrage de la zone retouchée, une carte des changements et des mesures de caractéristiques comme la luminosité ou la couleur. Le modèle dispose donc d’indices visuels et mesurés pour départager les résultats, au lieu de s’appuyer uniquement sur une impression générale. Cette recherche étudie précisément la contribution de ces informations au jugement d’un modèle généraliste.
Victor
Concrètement, comment ces signaux aident-ils le modèle à choisir ?
Noor
Pour chaque variante, le modèle reçoit un gros plan de la partie modifiée, une carte des zones qui ont changé et des mesures objectives. Il peut ainsi examiner plus finement les différences entre les propositions et les mettre en regard de la retouche demandée. Par exemple, lorsqu’il s’agit d’éclaircir une image, les mesures peuvent montrer qu’une variante est devenue trop claire ou que ses couleurs ont pris une tonalité plus chaude. Une autre proposition peut rester plus proche de l’objectif, même si les deux images semblent acceptables au premier regard. Le modèle compare alors plusieurs candidats à partir de ces éléments, en une seule passe. Il ne s’agit pas de prétendre que les mesures décident à elles seules de la qualité artistique : elles apportent des repères concrets au modèle qui doit choisir. L’approche combine donc une lecture visuelle locale et des données mesurées, plutôt qu’un jugement fondé uniquement sur l’image entière.
Victor
Quels résultats obtiennent les modèles, et comment leur jugement est-il évalué ?
Noor
Selon Brief IA, les chercheurs ont testé 7 modèles de langage dans une tâche où chacun devait choisir le meilleur rendu parmi plusieurs candidats. Avec les enregistrements de vérification, les 7 modèles ont surpassé les modèles ajustés spécialement pour cette évaluation. Sans ces signaux, aucun des 7 n’égalait le meilleur modèle spécialisé. Qwen3.8-27B a sélectionné une image jugée exploitable par des professionnels dans 81,3 % des cas, contre 74,8 % pour EditScore-72B. Le protocole s’appuie aussi sur des retouches examinées par des professionnels : un test distinct portait sur 600 modifications évaluées à l’aveugle par 5 spécialistes. Dans ce test, l’éditeur généraliste Flux-2-Klein-9B n’a pas produit de résultat exploitable dans 42,7 % des cas, et des outils spécialisés ont résolu environ 2 tiers de ces échecs. Ces chiffres montrent à la fois l’intérêt de la sélection assistée et les difficultés persistantes de l’édition généraliste. Ils ne signifient pas que chaque modèle produira lui-même une image de cette qualité dans toute situation : la mesure porte sur le choix d’un candidat parmi plusieurs.
Victor
Qu’est-ce que les essais disent du choix entre retouche progressive et variantes produites en parallèle ?
Noor
Les chercheurs ont comparé deux façons de travailler. La première consiste à reprendre une image déjà modifiée et à l’améliorer par étapes ; la seconde produit plusieurs variantes directement à partir de l’image originale. Quand les professionnels exprimaient une préférence, ils ont choisi la variante issue de la génération parallèle dans 78,5 % des comparaisons. L’intérêt possible est de ne pas construire chaque nouvelle proposition sur une image qui a déjà subi une série de transformations. Les essais indiquent donc une préférence pour les variantes parallèles dans ce protocole, pas une règle valable pour toutes les retouches. Cette stratégie a également demandé environ 2 fois moins de passes d’évaluation qu’un affinage itératif. C’est une économie relative au nombre de passes, et non une disparition du coût de calcul : le système doit toujours générer et examiner des candidats. Le résultat éclaire néanmoins une décision pratique de conception, celle de repartir de l’original plutôt que de multiplier les retouches successives.
Victor
Quelles sont les limites de la méthode, en particulier pour le calcul nécessaire ?
Noor
La limite principale est bien le coût de calcul. EditAgent obtient de meilleurs résultats que des agents antérieurs, mais nécessite environ 10 fois plus de calcul. Cette charge accompagne un système qui décompose les demandes, mobilise des outils spécialisés et compare des variantes avec des informations de vérification. La génération parallèle réduit le nombre de passes d’évaluation par rapport à l’affinage itératif, mais elle ne permet pas d’affirmer que l’ensemble du processus devient peu coûteux. Il faut aussi distinguer les résultats observés sur les évaluations de la performance dans chaque usage réel : le test mesure des choix de rendus et ne garantit pas que tous les types d’images ou toutes les demandes seront traités avec la même réussite. Les enregistrements de vérification et les outils mobilisés font partie intégrante de la méthode. On ne peut donc pas attribuer les résultats au seul modèle généraliste, utilisé sans autre aide. Le gain mis en évidence dépend d’un dispositif de comparaison et d’un investissement de calcul important.
Victor
Les résultats vérifiés peuvent-ils aussi servir à entraîner des éditeurs ?
Noor
Oui, les sorties validées par EditAgent ont servi à constituer un corpus d’environ 26 000 exemples d’entraînement. Des éditeurs entraînés à partir de ce corpus ont progressé sur 3 benchmarks, c’est-à-dire 3 évaluations standardisées. À l’inverse, des données générées directement par FLUX ont fait baisser ses performances dans ces comparaisons. La différence suggère que les exemples validés et les images générées sans cette validation n’ont pas le même effet sur l’entraînement. Il ne s’agit pas de conclure que toute donnée issue de FLUX serait inutile, mais de rapporter le résultat observé dans cette évaluation. Les chercheurs envisagent que les sorties vérifiées puissent aider à entraîner des modèles d’édition plus rapides. L’idée est de consacrer davantage de calcul à la vérification en amont, puis de réutiliser les exemples retenus pour améliorer d’autres éditeurs. Les résultats obtenus sur les 3 benchmarks apportent un premier indice en faveur de cette possibilité, sans établir à eux seuls le coût ou la qualité de futurs modèles déployés.
Victor
Qu’est-ce qu’il faut retenir de cette recherche ?
Noor
Bon, le résultat central est que des modèles généralistes peuvent mieux choisir entre des retouches quand on leur fournit des vues locales, des cartes de changements et des mesures objectives. Dans l’évaluation rapportée, les 7 modèles testés avec ces signaux ont dépassé les modèles ajustés pour la tâche, et Qwen3.8-27B a sélectionné un rendu jugé exploitable dans 81,3 % des cas. Cette performance concerne le choix d’une image parmi plusieurs, avec les informations de vérification, et non une promesse de réussite pour toute retouche. Le système a aussi un coût élevé, environ 10 fois plus de calcul que des agents antérieurs. En parallèle, ses sorties validées ont alimenté un corpus d’environ 26 000 exemples, associé à des progrès sur 3 benchmarks. La recherche met donc en avant deux étapes liées : mieux contrôler les propositions, puis réutiliser des résultats vérifiés pour entraîner des éditeurs. La suite dépendra notamment de la capacité à préserver ces progrès tout en réduisant le calcul nécessaire, un point que les résultats présentés ne permettent pas encore de trancher.
Victor
Merci Noor pour ces explications.
Une erreur ?
Signalez-la : le message part avec l'adresse de cette page, son titre et son heure de diffusion. Une personne mise en cause peut aussi exercer son droit de réponse.
Signaler une erreurUn mot pour la rédaction ?
Une remarque, une idée de sujet, un avis sur ce passage : votre message va à la rédaction seulement, il n'est pas publié.