Transformers prend en charge de nouveaux modèles

OOndine

Transformers, la bibliothèque de Hugging Face, ajoute la prise en charge de plusieurs nouveaux modèles avec sa version 5.20.0. La mise à jour ajoute Muse Spark Open, un modèle de Meta qui reçoit du texte, des images, de l’audio et de la vidéo, puis produit du texte. Sa fenêtre de contexte peut atteindre un peu plus d’un million de jetons, selon GitHub. Elle ajoute aussi la prise en charge native de Ling 3.0 Flash, d’InclusionAI. Le modèle peut être chargé sans activer une option qui autorise l’exécution de code externe au modèle. Autre ajout : Kolibri 1, d’Aleph Alpha, un modèle de raisonnement axé sur l’allemand et l’anglais. Enfin, MiniCPM-V 4.7, développé par OpenBMB, associe un encodeur visuel SigLIP à un modèle de langage Qwen3.5. Son nouvel encodage spatial et temporel représente les positions des éléments dans une image et conserve l’ordre des images d’une vidéo. La prise en charge native de Ling 3.0 Flash facilite son chargement dans Transformers, sans autoriser l’exécution de code externe au modèle. Les équipes qui travaillent sur des images ou des vidéos peuvent aussi s’appuyer sur MiniCPM-V 4.7 et son encodage des positions et du temps. Muse Spark Open accepte plusieurs types d’entrées dans une même fenêtre de contexte. Cette fenêtre peut atteindre un peu plus d’un million de jetons. Le modèle compte 816 milliards de paramètres au total, dont 42 milliards actifs par jeton : c’est un modèle de grande taille, à prendre en compte pour son utilisation.