Google DeepMind esittelee SL2T:n, viittomakielen käännösmallin, joka tuo viittomasta tekstiksi -käännöksen Pixel 11:een
Google/DeepMind
DeepMind
Google DeepMind on julkaissut SL2T:n, viittomakielestä tekstiksi -käännösmallin, ja integroinut sen Gboardiin ja Live Transcribe -sovellukseen Pixel 11:ssä amerikkalaisen viittomakielen (ASL) ja englannin välillä. Malli on koulutettu yli 100 000 tunnin datalla, joka kattaa yli 50 viittomakieltä, ja se saavuttaa nollanäytteen BLEURT-pisteet 70 FLEURS-ASL-testissä. SL2T on kehitetty yhteistyössä kuurojen yhteisön kanssa, ja se kääntää asentomerkeistä tekstiksi, mikä tukee käytännön käyttöä.
Google DeepMind esitteli SL2T:n, laajamittaisen monikielisen viittomakielestä tekstiksi -käännösmallin, joka tuo uusia viittomakielen ominaisuuksia kuuroille ja huonokuuloisille käyttäjille. Kyseessä on ensimmäinen kuluttajatuoteintegraatio, jossa on viittomakielestä tekstiksi -sanelu Gboardissa ja Live Transcribe -sovelluksessa Pixel 11:ssä, alkaen amerikkalaisesta viittomakielestä (ASL) englantiin. Malli on koulutettu yli 100 000 tunnin aineistolla, joka kattaa yli 50 viittomakieltä, joista noin neljännes on ASL:ää. SL2T kääntää suoraan asentojälkien sarjoista tekstiksi ohittaen glossit, ja se käyttää laitteessa tapahtuvaa seurantaa (MediaPipe Holistic) yksityisyyden suojaamiseksi. Vertailuarvojen, kuten FLEURS-ASL:n, mukaan SL2T saavuttaa nollakuvauspistemäärän 70 BLEURT-asteikolla. Kehitys oli yhteisölähtöistä, ja tekoälyn viittomakielen neuvoa-antava komitea (AISLAC) ohjasi vastuullista käyttöönottoa. Tulevaisuuden suunnitelmiin kuuluu laajentaminen uusiin viittomakieliin ja viittomakielen tuottamiseen.
Lähde: Google DeepMind —
Alkuperäinen
