Meta transforme une photo en corps 3D animable

MMarc

Meta a publié SAM 3D Body, un modèle d’intelligence artificielle qui reconstruit un maillage complet du corps humain à partir d’une seule photo, selon AlphaSignal. Le résultat est une représentation en trois dimensions du corps, que l’on peut guider avec des points-clés en deux dimensions ou des masques. Ces indications servent à orienter la reconstruction : elles peuvent désigner des éléments à prendre en compte, sans remplacer la photo de départ. Le modèle repose aussi sur Momentum Human Rig, une représentation paramétrique qui sépare le squelette de la forme du corps. Cette séparation est conçue pour faciliter l’édition et l’animation, ainsi que le transfert de mouvements entre représentations. Autrement dit, la structure du squelette et la forme corporelle sont distinguées dans le modèle, ce qui permet de les traiter séparément lors de ces opérations. La publication comprend deux versions du modèle, du code d’inférence et un jeu de données de 5 millions d’échantillons. Les modèles sont proposés sous la licence SAM. SAM 3D Body associe donc une reconstruction du corps à partir d’une image unique, des indications pour la corriger et une représentation séparant forme et squelette ; la publication met également à disposition les modèles, le code et les données nécessaires à son utilisation, sans que ces éléments changent le principe de départ : produire un maillage humain en trois dimensions à partir d’une photo.