Moonshot AI представила Kimi K3: прорыв в масштабе, производительности и стоимости для китайских моделей переднего края

Компания Moonshot AI выпустила Kimi K3 — новую модель переднего края, которая достигает производительности высшего уровня при значительном снижении стоимости инференса. Модель показывает конкурентоспособные результаты в бенчмарках, таких как AIME, GPQA и MMLU-Pro, и использует разреженную архитектуру "смесь экспертов" (Mixture-of-Experts) с 44 миллиардами активированных параметров.

Китайский стартап Moonshot AI, создатель ассистента Kimi, представил свою новейшую фронтирную модель Kimi K3. Модель построена на разреженной архитектуре «смесь экспертов» (Mixture-of-Experts, MoE) с общим количеством параметров 123 миллиарда, из которых 44 миллиарда активируются на каждый токен. Kimi K3 достигает передовых результатов на нескольких бенчмарках рассуждений, включая 94,1 на AIME

Показать ещё ↓

Источник: Moonshot Kimi (GNews) — оригинал