Kimi K3 en tête des classements mondiaux avec un modèle à 2,8 billions de paramètres

Moonshot AI a publié Kimi K3, un grand modèle de langage doté de 2,8 billions de paramètres, qui a atteint la première place dans plusieurs références industrielles, notamment LiveCodeBench, AIME et MATH-500. Kimi K3 surpasse GPT-4o et d'autres modèles de premier plan dans ces évaluations. L'architecture du modèle utilise un mélange d'experts (MoE) avec une forte parcimonie et un apprentissage par renforcement avancé avec une chaîne de pensée longue (Long-CoT) pour améliorer les capacités de raisonnement et de codage. Dans le nouveau classement mondial des grands modèles de langage, Kimi K3 était le modèle chinois le mieux noté. Moonshot AI souligne que ce n'est que le début de leur parcours d'innovation.