Pré-entraînement

CCapucine

Le pré-entraînement, c’est la phase où un modèle d’intelligence artificielle apprend des régularités dans de nombreux exemples, avant une tâche précise. Imaginez une personne qui découvre une langue en lisant des recettes, des lettres et des notices : elle repère les mots et leurs associations, sans apprendre encore un métier. Pour un modèle, cet apprentissage consiste notamment à prédire la suite d’un texte, puis à ajuster ses paramètres pour réduire ses erreurs. Cette base compte, car elle fournit des capacités réutilisables, ensuite orientées vers la traduction, le résumé ou les réponses aux questions, plutôt que de repartir de zéro. Mais le pré-entraînement ne garantit ni compréhension humaine ni exactitude : le modèle reprend des régularités de ses exemples, qui peuvent contenir des erreurs ou des biais, et produire des réponses convaincantes mais fausses.