Mistral dévoile Le Chonk : Mistral Large 4, un modèle d'un billion de paramètres
Mistral lance en préversion Mistral Large 4, un modèle massif d'un billion de paramètres (dont 49 milliards actifs), entraîné sur des accélérateurs Grace Blackwell. Si les poids sont promis pour la fin du mois, le tarif API élevé limite l'accessibilité immédiate.
Mistral a publié Le Chaton Fat Le Chonk
Mistral Large 4 est un modèle comptant un billion de paramètres au total, dont 49 milliards de paramètres actifs, entraîné sur 3 800 accélérateurs Grace Blackwell dans le centre de données propre à Mistral. Sur la plupart des benchmarks, il reste légèrement en dessous des meilleurs modèles open source, mais il évolue tout de même dans la même catégorie.
Le modèle est déjà disponible en préversion, avec une tarification API fixée à 1,36 $ / 4,18 $ par million de tokens, ce qui s'avère assez coûteux pour un modèle de cette envergure. La publication des poids est promise pour la fin du mois. L'apprentissage par renforcement (RL) étant toujours en cours, le modèle pourrait encore s'améliorer.
Pourquoi c'est important
AnalyseCette sortie démontre la volonté de Mistral de rivaliser avec les modèles open-weight les plus performants, bien que ses tarifs API élevés et le retard dans la publication des poids limitent son accessibilité immédiate.
Discuter dans la communauté
Partagez vos questions et vos idées avec les développeurs