Näin Kimi K3 nousi kärkeen: 2,8 biljoonan parametrin harjoitusmatka
Moonshot AI
Moonshot AI:n Kimi K3 -malli saavuttaa johtavaa suorituskykyä 2,8 biljoonalla parametrillä. Mallissa käytetään kehittyneitä harjoitustekniikoita, kuten Mixture of Experts -menetelmää ja laajamittaista rinnakkaislaskentaa.
Moonshot AI on kehittänyt Kimi K3 -suurkielimallin, jossa on 2,8 biljoonaa parametria ja joka saavuttaa huipputuloksia vertailutesteissä. Harjoitusprosessiin sisältyi asiantuntijoiden sekoitus -arkkitehtuuri (Mixture of Experts, MoE) ja massiivinen rinnakkaislaskenta tuhansilla GPU-yksiköillä. Malli osoittaa merkittäviä parannuksia päättelyssä, koodauksessa ja monikielisissä ominaisuuksissa. Saavutus korostaa Kiinan kasvavaa osaamista laajamittaisten tekoälymallien kehittämisessä.
Lähde: Moonshot Kimi (GNews) —
Alkuperäinen
