Meta mise sur les modèles ouverts pour relancer sa stratégie en intelligence artificielle

Meta a annoncé son intention de se concentrer sur les grands modèles de langage à poids ouverts, dévoilant le modèle ouvert Muse Glimmer et promettant d'ouvrir les poids de son modèle plus puissant Muse Spark 1.2 dans les prochaines semaines. Le PDG Mark Zuckerberg a publié un essai de 6 000 mots exposant la philosophie de l'entreprise en matière d'IA, visant à différencier Meta d'OpenAI et d'Anthropic, qui développent des modèles propriétaires et ont fait pression sur le gouvernement américain contre la distillation à grande échelle et les modèles à poids ouverts des laboratoires chinois. Muse Glimmer est un modèle de 30 milliards de paramètres avec une fenêtre de contexte de 128 000 jetons, distillé à partir de Muse Spark, et conçu pour fonctionner localement sur les machines des utilisateurs sous licence Apache 2.0. Muse Spark, lancé en avril comme modèle frontalier fermé, a marqué un changement par rapport à l'approche ouverte antérieure de Meta ; sa version 1.2, publiée le 5 août, incluait Muse Code, un agent de codage qui concurrence sur le coût plutôt que sur la capacité supérieure. Muse Glimmer reflète une tendance vers l'inférence locale pour réduire la dépendance aux modèles des grands laboratoires comme ceux d'Anthropic et d'OpenAI.