Alibaba's videomodel Wan3.0 gaat in openbare bèta: documenten en PowerPoint kunnen ook video worden

Op 6 augustus opende Alibaba de openbare bètaversie van zijn videogeneratie-grootmodel Wan 3.0, met upgrades op het gebied van generatieduur, universele creatie, almachtige referentie en realistische restauratie. Het kan in één keer een video van 30 seconden genereren, waarmee de creatieve intentie volledig tot uiting komt. Voor het eerst ondersteunt het invoer van documentindelingen naast de vier basismodaliteiten tekst, beeld, audio en video, waaronder doc, xls, ppt, pdf en md. Het model streeft ernaar de echte wereld nauwkeurig te herstellen, waarbij elke persoon een uniek uiterlijk heeft en elk frame zowel realistisch als geloofwaardig is. De verlenging van de generatieduur is de meest intuïtieve upgrade, waardoor complexe camerabewegingen zoals continue panning en one-shot-opnames mogelijk zijn. Wan 3.0 heeft ook een slimme duurfunctie die automatisch een geschikte duur aanbeveelt op basis van de prompt. Het ontwikkelt zich van een videogeneratiemodel tot een voertuig voor informatie-expressie, dat gestructureerde informatie uit documenten en presentaties kan lezen en in combinatie met prompts lesmateriaal, productdemo's en zakelijke rapporten kan genereren. De ondersteunde indelingen omvatten doc, xls, ppt, pdf en md, met individuele bestanden of links die niet groter zijn dan 100 MB en niet meer dan 50 pagina's. Als u bijvoorbeeld een presentatie over slimme brillen uploadt met een prompt, krijgt u een complete promotievideo. Dit wordt ondersteund door de sterke prompt-engineering en instructievolgcapaciteiten van het model, die prompts omzetten in een hub voor het plannen van invoer en het regelen van expressie. Videogeneratiemodellen upgraden van contentgeneratie naar productiviteitstools, en gebruikers eisen niet alleen duidelijkheid maar ook realisme. Wan 3.0 reproduceert en presenteert zowel echte scènes als digitale informatie nauwkeurig, waarbij gegenereerde menselijke figuren streven naar unieke gezichten, gedetailleerde gelaatstrekken en huid, natuurlijke en ingehouden emotionele uitdrukkingen, en gecoördineerde micro-expressies en lichaamsbewegingen. Bij almachtige referentietaken worden fijnmazige aspecten zoals personages, rekwisieten, geluid, ruimtelijke relaties en stijl stabiel gehandhaafd. De visuele kwaliteit van digitale informatie wordt ook verbeterd, waardoor grafieken, gegevens en interface-inhoud een gevoel van textuur krijgen. Bovendien zijn de videobewerkingsmogelijkheden van Wan 3.0 aanzienlijk verbeterd, met ondersteuning voor wijzigingen aan beeldmateriaal, plot en dialoog. Er is nog ruimte voor verbetering op het gebied van geluidskwaliteit en tekstnauwkeurigheid. Met onmiddellijke ingang is Wan 3.0 in openbare bèta beschikbaar op Alibaba Cloud Bailian, Wanjing Yike, de officiële website van Wanxiang, Qianwen Creation pc, IF STUDIO en Duijiu, met een geleidelijke uitrol op de Qianwen-app. API-prijzen voor 480P, 720P en 1080P zijn respectievelijk 0,3, 0,6 en 1,2 yuan per seconde, en de API-interface zal binnenkort volledig worden geopend.