Kimi K3 con código abierto: Anthropic finalmente muestra sus cartas

Moonshot AI ha liberado el código abierto del modelo Kimi K3, cuyo rendimiento en benchmarks es comparable al de Claude Sonnet 4 de Anthropic. La publicación de código abierto incluye los pesos del modelo y un informe técnico. El informe revela que Anthropic ha adoptado una versión escalada de la relación óptima de Chinchilla, lo que permite un mayor tamaño de lote y una tasa de aprendizaje más alta para un entrenamiento más eficiente. Kimi K3 se basa en una arquitectura de Mezcla de Expertos (MoE), con un total de 48 expertos y 2 expertos activos por token, activando 37 mil millones de parámetros de un total de 264 mil millones. El modelo está diseñado para escalabilidad y eficiencia, con una longitud de contexto de 128K y entrenamiento de precisión mixta FP8. La liberación del código abierto de Kimi K3 se considera un movimiento para democratizar el acceso a la IA avanzada y desafiar a actores establecidos como Anthropic y OpenAI.