Весна для открытых LLM: 10 архитектур за январь-февраль 2026
Arcee AI
Moonshot AI
Alibaba/Qwen
MiniMax
Cohere
Обзор десяти открытых LLM весны 2026 года с акцентом на архитектурные сходства и различия. Среди ключевых моделей — Trinity Large, Kimi K2.5, Step 3.5 Flash, Qwen3-Coder-Next и другие.
Автор представляет обзор десяти открытых LLM, выпущенных в январе-феврале 2026 года, с акцентом на архитектурные детали. Arcee AI выпустила Trinity Large (400B MoE, 13B активных) с локально-глобальным вниманием (3:1), QK-Norm, NoPE, gated attention и четырьмя слоями RMSNorm. Moonshot AI представила Kimi K2.5 (1 триллион параметров) — мультимодальное расширение K2, обученное на 15 триллионах
Показать ещё ↓
Источник: Sebastian Raschka —
оригинал