Echoverse: diep evoluerende omgevingen voor het trainen van computergebruiksagenten

Microsoft Research heeft Echovese ontwikkeld, een verzameling van twaalf synthetische werelden voor het trainen van computergebruikagenten, bestaande uit tien domeinspecifieke werelden en twee capaciteitswerelden. Deze werelden bootsen het gedrag van echte applicaties na met coherente toestanden en realistische gegevens, waardoor agenten kunnen leren van daadwerkelijke consequenties. Het trainen van een 9B-model op alle twaalf werelden verbeterde de score van 36,5% naar 67,1%, waarmee de prestaties van GPT-5.4 werden benaderd. Belangrijke bevindingen zijn de noodzaak van hoge simulatiegetrouwheid, de effectiviteit van het oefenen met uitdagende UI-elementen zoals datumkiezers, en de voordelen van het co-evolueren van het model, de wereld en de verificateur. Versterkend leren met behulp van gefundeerde verificateurs als beloning presteerde beter dan imitatie leren. Microsoft brengt vier werelden uit met code, gegevens en beoordelaars om verder onderzoek te ondersteunen.