Echoverse: 딥러닝하는 컴퓨터 사용 에이전트 훈련을 위한 진화 환경

마이크로소프트 리서치가 컴퓨터 사용 에이전트 훈련을 위한 12개의 합성 세계로 구성된 Echoverse를 개발했습니다. 이 컬렉션은 10개의 심층 도메인 세계와 2개의 역량 세계로 이루어져 있습니다. 이 세계들은 일관된 상태와 현실적인 데이터로 실제 애플리케이션의 동작을 재현하여 에이전트가 실제 결과를 통해 학습할 수 있게 합니다. 12개 세계 모두에서 90억(9B) 파라미터 모델을 훈련한 결과, 점수가 36.5%에서 67.1%로 향상되어 GPT-5.4의 성능에 근접했습니다. 주요 발견으로는 높은 시뮬레이션 충실도의 필요성, 날짜 선택기와 같은 까다로운 UI 요소 집중 훈련의 효과, 그리고 모델, 세계, 검증기의 공진화(Co-evolution) 이점이 포함됩니다. 기반 검증기(Grounded Verifier)를 보상으로 사용한 강화 학습이 모방 학습보다 뛰어난 성능을 보였습니다. 마이크로소프트는 추가 연구를 지원하기 위해 코드, 데이터, 채점기와 함께 4개의 세계를 공개합니다.