Decepticon revendique 98,08 % de réussite au benchmark XBOW

MMarc

BitterSecurity présente Decepticon, un outil open source de red team fondé sur LangGraph, qui revendique 102 défis réussis sur 104 dans le benchmark de piratage web XBOW, soit un taux annoncé de 98,08 %, selon AlphaSignal. Le chiffre de 98,08 % resterait toutefois une revendication des mainteneurs, qui ne serait pas présentée comme ayant été reproduite indépendamment. Les défis de cette suite portent sur l’exploitation de vulnérabilités web, avec des tâches allant d’un niveau facile à difficile ; le résultat décrit donc une performance sur ce périmètre précis, et non une mesure générale des capacités de l’outil. Decepticon coordonne 16 agents spécialisés, chargés notamment de la reconnaissance, de l’exploitation et de la post-exploitation, mais aussi de tâches liées à Active Directory, au cloud, à la rétro-ingénierie et aux contrats intelligents. L’outil exécute ses programmes dans un environnement Kali Linux isolé et conteneurisé, et utilise des sessions tmux persistantes pour gérer les outils interactifs. Le dépôt, proposé sous licence Apache 2.0, compte plus de 5 700 étoiles sur GitHub et offre une intégration MCP avec Claude Code et Codex. Les comparaisons avec d’autres agents dépendraient notamment des modèles utilisés, des budgets de jetons, des règles de tentatives, des outils disponibles et des versions du benchmark ; ces résultats ne permettent pas non plus de conclure aux performances de Decepticon sur d’autres environnements, notamment les réseaux internes, le cloud ou Active Directory.