Alibaba выпускает Qwen2.5-Coder: до 32 миллиардов параметров, открытые модели для кода
Alibaba/Qwen
DeepSeek
Mistral
Команда Qwen из Alibaba анонсирует Qwen2.5-Coder — новое поколение серии открытых моделей для кода размером 1,5 миллиарда, 7 миллиардов и предстоящие 32 миллиарда параметров, обученное на 5,5 триллиона токенов. Версия на 7 миллиардов параметров превосходит более крупные модели, такие как DeepSeek-Coder-V2-Lite и CodeStral-22B, в задачах по коду, сохраняя при этом сильные математические и общие способности.
Команда Qwen из Alibaba выпустила Qwen2.5-Coder, преемника CodeQwen1.5, в рамках серии Qwen2.5. Модели доступны в трех размерах: 1,5B, 7B и версия на 32B, которая скоро появится. Они обучены на 5,5 триллиона токенов, включая исходный код, данные привязки текста к коду и синтетические данные, с дополнительными математическими и общими данными для сохранения некодирующих способностей. Базовая
Показать ещё ↓
Источник: Alibaba Qwen —
оригинал