UI-Venus-2는 모바일·웹·데스크톱을 아우르는 범용 GUI 에이전트로, 통합된 폐루프 추론-행동 프레임워크를 통해 벤치마크 중심 모델을 실제 배포 가능한 수준으로 끌어올리는 것을 목표로 한다. 연구진은 170개 이상의 다국어 모바일 앱과 네이티브 데스크톱 OS로 환경 범위를 확장하고, 딥리서치 파이프라인으로 기능 기반 지시문을 자동 생성했으며, 시각적 키포인트와 다중 모델 투표를 활용한 궤적·샘플 단위 평가자로 강화학습 신호의 신뢰성을 높였다. 여기에 중요한 행동의 실행을 통제하는 안전 인식 메커니즘도 함께 통합했다. UI-Venus-2는 오픈소스로 공개되어 실환경에서 일반화되고 검증 가능하며 자기성찰적인 GUI 에이전트 개발을 앞당길 것으로 기대된다.
- •모바일·웹·데스크톱을 통합 지원하는 범용 GUI 에이전트 UI-Venus-2 공개
- •170개 이상 다국어 모바일 앱과 데스크톱 OS로 환경 범위 확장
- •딥리서치 파이프라인으로 기능 기반 지시문을 자동 생성
- •시각적 키포인트와 다중 모델 투표 기반 평가로 강화학습 신뢰성 확보
- •중요 행동 실행을 통제하는 안전 메커니즘 통합과 오픈소스 공개
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
UI-Venus-2 Technical Report
- 1.UI-Venus-2는 모바일·웹·데스크톱을 하나의 폐루프 추론-행동 프레임워크로 통합한 범용 GUI 파운데이션 에이전트
- 2.170개 이상의 다국어 모바일 앱과 네이티브 데스크톱 OS까지 환경 커버리지를 확장
- 3.심층 리서치 파이프라인으로 기능에 기반한 지시문을 자동 생성하고, 시각적 키포인트와 다중 모델 투표로 신뢰도 높은 RL 학습 신호를 확보
- 4.파급력 있는 행동에는 안전 인식 메커니즘을 결합했으며 오픈소스로 공개
왜 중요한가?
벤치마크용 GUI 에이전트를 실제 배포 가능한 수준으로 끌어올리기 위한 환경·과제·검증 3축 스케일업 전략을 오픈소스로 제시해, 실무형 컴퓨터 사용 에이전트 개발의 참고 기준이 될 수 있다.
언급 프로젝트
본문 미리보기
arXiv:2609.00028v1 Announce Type: new Abstract: Multimodal GUI agents have emerged as a promising paradigm for digital task automation, yet transitioning from benchmark-oriented models to dependable real-world applications remains challenging due to limited environment coverage, brittle task construction, and unreliable reward verification. In this work, we present UI-Venus-2, a general-purpose foundation GUI agent designed to operate across mobile, web, and desktop environments through a unifi
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 10:40AI 초안
![[AI리더의 서가] Agentic AI 구축 개발의 모든 것](https://cdn.aitimes.com/news/photo/202610/215958_219938_244.jpg)
