crewAI ajoute une commande d’évaluation

LLéna

crewAI, un framework d’agents, ajoute la commande `crewai eval` dans sa version 1.15.28, publiée mercredi sur GitHub. Elle est conçue pour indiquer à quelle étape un modèle interrompu a échoué. Elle peut donc aider les personnes qui développent ou maintiennent des agents avec crewAI à repérer où un traitement s’est interrompu. La commande localise l’échec ; les informations publiées ne lui attribuent pas de réparation automatique. La mise à jour s’appuie aussi sur le catalogue LiteLLM pour déterminer les fenêtres de contexte. Ce changement concerne les équipes qui configurent des modèles dans crewAI : le catalogue sert à établir la fenêtre associée au modèle. La version comprend également plusieurs corrections pour les flux, les déploiements et les appels d’outils. Elle améliore la reprise d’un flux après un retour humain et préserve les types de sortie examinés. Lorsqu’un crew est ajouté, crewAI corrige aussi l’identification du paquet à partir du fichier de configuration du projet. Côté déploiement, la mise à jour permet notamment d’afficher les raisons d’un échec et corrige des vérifications liées à la suppression et aux fichiers de verrouillage. Elle ajuste aussi la lecture de fichiers JSON locaux qui comportent une marque d’ordre des octets au début du fichier. Enfin, pour les appels d’outils d’Anthropic diffusés en continu, elle émet un événement signalant la fin de l’appel. Ces changements sont utiles aux équipes qui rencontrent ces cas précis : reprise après une intervention humaine, configuration des modèles, déploiement ou traitement en streaming. Pour l’évaluation, le bénéfice annoncé reste le repérage de l’étape où le modèle interrompu a échoué, et non une garantie de diagnostic complet.