Vivix julkaisee A1-mallin: ensimmäinen reaaliaikainen malli interaktiiviseen virtuaalihahmovuorovaikutukseen
Vivix
Vivix on paljastanut A1:n, ensimmäisen reaaliaikaisen multimodaalisen interaktiivisen mallin, joka mahdollistaa käyttäjien videomaisten keskustelujen käymisen virtuaalihahmojen kanssa. Mallissa on lähes 30 miljardia aktivoitua parametria, se saavuttaa yli 10 000 videotokenia sekunnissa yhdellä grafiikkasuorittimella ja toimii kuluttajatason grafiikkasuorittimilla innovaatioiden, kuten MJD-tislauksen ja VMI-päätelmäinfrastruktuurin, ansiosta. Lisäksi Vivix esitteli W1-mallin, jonka avulla käyttäjät voivat puuttua tarinan kulkuun ja muuttaa sitä reaaliajassa.
Vivix julkaisi A1:n, reaaliaikaisen interaktiivisen multimodaalisen mallin, jonka avulla käyttäjät voivat kommunikoida virtuaalihahmojen kanssa livestriimausvideon välityksellä. Toisin kuin perinteiset digitaaliset ihmiset, A1-hahmoilla on fyysinen keho, joka pystyy liikkumaan, vaihtamaan asentoa ja vuorovaikuttamaan ympäristönsä kanssa. Malli käyttää yhtenäistä striimausarkkitehtuuria, joka integroi multimodaaliset viittaukset, reaaliaikaisen vuorovaikutuksen ja striimausgeneroinnin. Siinä on lähes 30 miljardia aktivoitua parametria ja se saavuttaa yli 10 000 videotokenia sekunnissa yhdellä kuluttajatason näytönohjaimella teknologioiden, kuten Multidimensional Joint Distillation (MJD) ja Vivix Model Infra (VMI) ansiosta. VMI erottaa kooderin ja dekooderin toisistaan, käyttää natiivia NVFP4-koulutuspäättely-yhteissuunnittelua ja hyödyntää laskenta-viestintä-muisti -yhteisaikataulutusmoottoria viiveen minimoimiseksi. Järjestelmä vastaa uusiin syötteisiin vain 300 millisekunnissa ja sen keskimääräinen viive on 0,6 sekuntia. Vivix esitteli myös W1:n, jonka avulla käyttäjät voivat puuttua ja muuttaa hahmojen valintoja ja tarinalinjoja reaaliajassa.
Lähde: QbitAI 量子位 —
Alkuperäinen