Primavera dos LLMs Abertos: 10 Arquiteturas em Janeiro–Fevereiro de 2026
Arcee AI
Moonshot AI
Alibaba/Qwen
MiniMax
Cohere
Uma revisão de dez LLMs abertos da primavera de 2026, com foco em semelhanças e diferenças arquitetônicas. Os principais modelos incluem Trinity Large, Kimi K2.5, Step 3.5 Flash, Qwen3-Coder-Next e outros.
O autor apresenta uma visão geral de dez LLMs abertos lançados em janeiro-fevereiro de 2026, com foco em detalhes arquitetônicos. A Arcee AI lançou o Trinity Large (400B MoE, 13B ativos) com atenção local-global (3:1), QK-Norm, NoPE, atenção com portão e quatro camadas RMSNorm. A Moonshot AI apresentou o Kimi K2.5 (1 trilhão de parâmetros) — uma extensão multimodal do K2 treinada em 15 trilhões de tokens visuais e de texto com fusão precoce. O Step 3.5 Flash da StepFun (196B MoE, 11B ativos) alcançou 100 tokens por segundo com comprimento de contexto de 128k usando MTP-3 (predição de múltiplos tokens, 3 tokens). O Qwen3-Coder-Next (80B, 3B ativos) superou modelos maiores em tarefas de codificação devido a um híbrido de Gated DeltaNet e Gated Attention (3:1). Também são mencionados o GLM-5 da z.AI, o MiniMax M2.5, o Nanbeige 4.1 3B, o Qwen 3.5, o Ling 2.5 e o Ring 2.5 do Ant Group, o Tiny Aya da Cohere, bem como os modelos Sarvam 30B e 105B.
Fonte: Sebastian Raschka —
original
