Googlen tutkimus: Uusi menetelmä 'tulevaisuuden taitojen' arviointiin generatiivisella tekoälyllä

Google Research esitteli Vantagen, tutkimuskokeilun, jossa arvioidaan ”tulevaisuuden taitoja” generatiivisen tekoälyn avulla. Yhteistyössä New Yorkin yliopiston opettajien ja tutkijoiden kanssa kehitetty Vantage on suunnattu lukio- ja korkeakouluopiskelijoille. Alusta simuloi keskusteluja tekoäly-hahmojen kanssa valvotussa ympäristössä. Käyttäjät joutuvat avoimiin skenaarioihin, kuten väittelyyn valmistautumiseen tai luovan idean esittelyyn. Executive Large Language Model -malli analysoi dynaamisesti keskustelun kulkua ja tuo esiin tiettyjä haasteita – vastaväitteitä, konflikteja – saadakseen tarpeeksi tietoa arviointia varten. Tehtävän päätyttyä tekoälyanalysoija tutkii puhtaaksikirjoitetun keskustelun ja antaa pisteitä pedagogisten arviointikriteerien mukaan tarjoten käyttäjälle visuaalisen taitoasteikon ja laadullista palautetta. Yhteistutkimuksessa 188 vapaaehtoisen (18–25-vuotiaita, Yhdysvallat) kanssa verrattiin tekoälyanalysoijan ja New Yorkin yliopiston asiantuntijoiden antamia arvioita. Tekoälyn ja asiantuntijoiden välinen yhdenmukaisuus oli yhtä suuri kuin kahden ihmisasiantuntijan välillä. Lisäksi tehtiin tutkimus OpenMic-yrityksen kanssa: tekoälyanalysoija arvioi 180 opiskelijan luovia töitä (hahmohaastatteluja, artikkeleita) – korrelaatio asiantuntija-arvioiden kanssa oli korkea. Vantage on nyt rekisteröitävissä Google Labsissa ja toimii tällä hetkellä englanniksi. Kehittäjät suunnittelevat lisätutkimuksia taitojen siirrettävyydestä simulaatiosta todellisiin vuorovaikutustilanteisiin sekä simulaatioympäristöissä harjoittelun tehokkuuden arviointia.