마이크로소프트 리서치는 컴퓨터 사용 AI 에이전트 훈련을 위한 12개의 '딥 월드' 환경 프레임워크 Echoverse를 공개했다. 10개의 도메인 특화 환경과 2개의 특정 기술(날짜 선택기, 중첩 필터) 훈련용 환경으로 구성되며, 실제 업무처럼 상태가 유지되고 검증 가능한 데이터베이스 기반 보상을 제공한다. 이 환경에서 훈련한 90억 파라미터 모델은 평균 정확도가 36.5%에서 67.1%로 거의 두 배 상승해 GPT-5.4(80.7%)와의 격차를 14점포인트로 좁혔으며, 얕은 환경은 오히려 성능을 떨어뜨리는 반면 깊이 있는 환경만 실제 웹으로 전이됐다. 강화학습을 추가 적용하면 held-out 평가 점수가 58%에서 69%로 올라, 모방학습의 한계를 넘어선다는 점을 보였다.
- •10개 도메인 환경(이메일·캘린더·뱅킹 등)과 2개 범용 기술 환경(날짜선택기·중첩필터)으로 구성
- •9B 모델 평균 정확도 36.5%→67.1%, GPT-5.4(80.7%)와 격차 14점p로 축소
- •얕은 환경 훈련은 성능을 떨어뜨리고, 깊은 환경만 실제 웹(WebVoyager 등)으로 전이
- •강화학습 적용 시 held-out 평가 점수 58%→69%로 추가 상승
- •환경 코드·데이터·검증기 중 4개 월드를 오픈소스로 공개(EchoStay, EchoForge 등)
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
Echoverse: Deep, evolving environments for computer-use agents
본문 미리보기
Computer-use AI agents struggle with multi-step workflows like email and customer support. Echoverse trains agents in realistic environments rather than simply providing more training tasks, helping them improve as the tasks, tests, and environments evolve. The post Echoverse: Deep, evolving environments for computer-use agents appeared first on Microsoft Research.
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 11:05AI 초안

