Büyük Modeller Parametre Yarışına Geri Döndü: 2 Trilyon Standart Haline Geldi, Sıradaki Durak 3 Trilyon mu?
Çin'in büyük modelleri yeniden bir parametre yarışına girdi; 2 trilyon parametre ortak bir standart haline gelirken, 3 trilyon bir sonraki kilometre taşı olarak görülüyor. Bu eğilim, rekabet baskıları ve daha büyük modellerin daha iyi performansa yol açtığı inancıyla yönlendiriliyor, ancak aynı zamanda hesaplama maliyetleri ve verimlilik konusunda endişeleri de beraberinde getiriyor.
Habere göre Çin'in büyük model (large language model) sektörü bir kez daha parametre sayısını artırma yarışına odaklanıyor; 2 trilyon parametre artık üst düzey modeller için yeni bir alt sınır haline geldi. Sektör kaynakları, bir sonraki hedefin 3 trilyon parametre olduğunu belirterek, model büyüklüğünün yeniden temel bir rekabet unsuru olarak öne çıktığına dikkat çekiyor. Bu değişim, verimlilik ve daha küçük modellerin önceliklendirildiği bir dönemin ardından geldi; ancak şimdi ölçek yarışı, daha büyük modellerin daha üstün yetenekler sunacağı varsayımıyla yeniden hız kazanmış durumda. Ne var ki bu yönelim, muazzam hesaplama kaynağı gereksinimleri, yüksek eğitim maliyetleri ve daha ileri düzey optimizasyon tekniklerine duyulan ihtiyaç gibi önemli zorlukları da beraberinde getiriyor. Bu eğilim, küresel yapay zeka yarışında geride kalmamak için yoğun yatırımlar yapan başlıca Çinli yapay zeka şirketlerinin genelinde gözlemleniyor. Uzmanlar ise yalnızca parametre sayısını artırmanın daha iyi performansı garanti etmeyebileceği konusunda uyarıda bulunarak, veri kalitesine ve algoritma yeniliğine daha fazla önem verilmesi gerektiğini vurguluyor.
Kaynak: Moonshot Kimi (GNews) —
orijinal