Turing-NLG : un modèle de langage de 17 milliards de paramètres par Microsoft

Microsoft Research a publié un modèle de langage de 17 milliards de paramètres, le plus grand jamais réalisé. En moins de deux ans, le nombre de paramètres des plus grands modèles linguistiques a été multiplié par 180.

Comme le montre Microsoft, un grand modèle peut générer des réponses décentes à des questions ouvertes, démontrant dans certains cas des « capacités zéro ».

Publicités

Laisser un commentaire

Ce site utilise Akismet pour réduire les indésirables. En savoir plus sur comment les données de vos commentaires sont utilisées.