Video Post-Prodüksiyonu Risk Altında: MiniMax H3, Çizimi Efekte Dönüştürüyor, Çok Modlu 'Kodlama Anı' Geldi
MiniMax
MiniMax, ilk açık kaynaklı video modeli H3'ü yayınladı. Model; kurgu, tipografi, geçişler, tempo, arka plan müziği ve görsel efektleri uçtan uca entegre ediyor. Kullanıcılar metin girebilir ve varsayılan olarak 2K çözünürlükte yayına hazır bir video elde edebilir. Model, video düzenlemede yeni bir SOTA (son teknoloji) olarak övülüyor ve metin, görüntü, ses ve video dahil tam modlu girdiyi destekliyor.
MiniMax resmi olarak yeni nesil video modeli MiniMax H3'ü yayınladı; bu aynı zamanda şirketin ilk açık kaynaklı video modeli. H3, video modellerinin yalnızca ham görüntü ürettiği önceki paradigmayı kırarak düzenleme mantığı, tipografi, geçiş tasarımı, ritim kontrolü, arka plan müziği ve görsel efektleri uçtan uca entegre ediyor. Kullanıcılar metin girebilir ve varsayılan olarak 2K çözünürlükte, yayına hazır, bitmiş bir video alabilirler. Model, denizaşırı geliştiriciler tarafından iyi karşılandı ve video düzenleme kategorisinde Artificial Analysis liderlik tablosunda zirveye yerleşti. Yazar H3'ü test etti ve kullanıcı niyetine oldukça duyarlı olduğunu, hatta karmaşık çok çekimli komutları bile doğru bir şekilde takip ettiğini buldu. H3 ayrıca, yapay zeka video modelleri için yaygın bir başarısızlık noktası olan videolarda metin üretmede önemli bir iyileşme gösteriyor. Kareler arasında tutarlı kalan metinler üretebiliyor ve hatta metin ile görsel içerik arasındaki ilişkiyi anlayabiliyor. Ayrıca H3, diyalog için ses klibini girdi olarak alabiliyor; ses, görsellerin duygusu ve ritmiyle senkronize ediliyor ve MiniMax'ın çok modlu ses modellerindeki uzmanlığı üzerine inşa ediliyor. Fiyatlandırma düşük; 2K çözünürlükte saniye başına maliyet, ana akım modellerin üçte birinden daha az. H3, tam modlu girdiyi destekliyor; yani tüm medya türleri modelin bağlamının bir parçası. Verimli çok modlu işleme için özel bir altyazı modeli ve H3-Omni Transformer mimarisi kullanıyor. MiniMax'ın yaklaşımı, çok modlu artı dilin ortaya çıkışına dayanıyor ve izole modları dil aracılığıyla birbirine bağlıyor. H3'ün açık kaynaklı doğası, işletmelerin özel içerik iş akışları için modeli özel olarak dağıtmasına ve ince ayar yapmasına olanak tanıyor ve potansiyel olarak fikri mülkiyet canlılığında bir artışa yol açıyor. MiniMax'ın M2 serisinden H3'e kadar açık kaynaklı modeller yayınlama geçmişi var; bu, 'Herkesle Zeka' vizyonuyla uyumlu. Bu sürüm, video üretiminin ticari olarak uygulanabilir bir üretim aracı haline geldiği bir 'Kodlama anına' geçişini işaret ediyor.
Kaynak: QbitAI 量子位 —
orijinal
