AI 오디오 기업 일레븐랩스가 원본 음성의 감정과 퍼포먼스를 정교하게 유지하며 다른 언어로 변환하는 AI 더빙 모델 '더빙 v2'를 일레븐 API를 통해 개발자·기업용으로 공개했다. 기존 방식이 음성을 텍스트로 변환 후 번역·재합성하는 과정에서 감정과 억양이 손실됐던 것과 달리, 더빙 v2는 오디오-투-오디오 방식으로 입력 음성에서 직접 새 언어의 음성을 생성해 뉘앙스를 유지한다. 한국어와 일본어를 포함해 92개 언어를 지원하며, 콘텐츠 제작자와 미디어 기업이 자체 워크플로우에 더빙 기능을 통합할 수 있다. 다만 립싱크 가공과 실시간 다국어 더빙 기능은 이번 출시 범위에 포함되지 않았다.
- •오디오-투-오디오 방식으로 텍스트 변환 없이 직접 새 언어 음성 생성, 감정·억양 손실 최소화
- •한국어·일본어 포함 92개 언어 지원, 5월 UI 버전 이어 이번엔 API로 공개
- •영상 제작자·게임 스튜디오·미디어 기업 등이 자체 파이프라인에 직접 통합 가능
- •립싱크 가공, 실시간 다국어 더빙 기능은 이번 출시 범위에서 제외
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
일레븐랩스, “원본 감정 그대로 재현”…AI 더빙 모델 ‘더빙 v2’ 출시
본문 미리보기
인공지능 오디오 연구·개발 기업 일레븐랩스(ElevenLabs)가 원본 음성의 감정과 퍼포먼스를 보다 정교하게 유지하면서 다른 언어로 변환하는 새로운 AI 더빙 모델을 선보였다.일레븐랩스는 10일, 원본 음성의 감정 표현과 퍼포먼스를 재현하는 인공지능(AI) 더빙 모델 ‘더빙 v2(Dubbing v2)’를 개발자와 기업이 직접 활용할 수 있도록 일레븐 API(ElevenAPI)를 통해 공개했다고 밝혔다.더빙 v2는 지난 5월 28일 사용자 인터페이스(UI) 버전으로 먼저 공개됐으며, 이번 API 출시를 통해 개발자와 기업이 자체
전체 내용이 궁금하다면?
원문을 직접 읽어보세요
이 글이 만들어진 과정
- 11:00AI 초안
