MS, 코드로 영상 속 물리법칙 정밀 제어하는 '코드 비디오 모델' 공개

출처:AI 타임스

AI 인사이트

개발자

1.MS, 코드로 장면 구성·객체 움직임·카메라 경로를 직접 제어하는 '코드 비디오 모델' 공개
2.코딩 에이전트가 프롬프트를 실행 가능한 프로그램으로 변환해 물리 법칙 적용한 프록시 비디오·참조 이미지를 1분 내 생성
3.R2V 모델(미니맥스-H3)이 프록시·참조 이미지로 최종 영상 생성, '초기 단계 조건화' 기법으로 제어·자연스러움 동시 확보
4.자체 벤치마크 '코드비디오벤치'서 기존 최고 성능 학습 기반 모델 VACE(74.3~80.6점) 능가하는 82.1~85.8점 기록

왜 중요한가?

기존 비디오 확산 모델은 객체 배치·움직임이 내부적으로 결정돼 세부 조정이 어려웠는데, 코드로 장면을 명시적으로 설계함으로써 물리적으로 일관된 제어가 가능해져 로봇 시뮬레이션, 3D·4D 재구성 등으로 응용 범위를 넓힐 잠재력이 있다.

언급 프로젝트

코드 비디오 모델 미니맥스-H3 VACE 코드비디오벤치

본문 미리보기

AI의 영상 제작 기술이 발전하면서 원하는 장면과 움직임을 얼마나 정확하게 구현하느냐가 핵심 과제로 떠오르고 있다. 마이크로소프트(MS)는 코드로 영상의 구조와 동작을 설계해 생성 과정을 직접 제어하는 새로운 접근법을 제시했다. MS는 11일(현지시간) 실행 가능한 코드를 활용해 영상의 장면 구성과 객체 움직임, 카메라 경로 등을 정밀하게 제어하는 '코드 비디오 모델(Code Video Model)'을 공개했다.기존 비디오 생성 모델이 장면의 물리적 움직임과 객체 배치를 내부적으로 처리하는 방식에서 벗어나, 코드로 장면을 설계하고

전체 내용이 궁금하다면?

원문을 직접 읽어보세요

원문 보기