핵심 답변
요점 정리
- 더빙 요청 한 번으로 작품 하나를 최대 29개 타겟 언어로 보냅니다. 수동 검토 플래그를 켜면 각 언어는 검토자가 승인할 때까지 검토 단계에서 대기합니다.
- 각 언어는 각자의 승인에 따라 렌더링되므로, 일본어가 아직 검토 중이어도 스페인어는 먼저 공개할 수 있습니다.
- 웹훅이 모든 상태 변화를 보고합니다: 검토 준비 완료, 언어별 결과물 준비 완료, 더빙 전체 완료, 또는 오류 내용이 담긴 실패.
- 2026년 8월 5일 같은 클립으로 측정했을 때, ElevenLabs Dubbing v2 (Alpha)는 웃음, 음악, 현장음 같은 배경음 오류가 270% 더 많았습니다.
01.왜 커버리지가 병목일까요?
카탈로그에는 매주 작품이 추가되지만, 한 작품씩 캐스팅하고 녹음하고 믹싱하는 파이프라인은 정해진 속도로만 언어를 추가합니다. 결국 대기열이, 한 시장이 자국어로 볼 수 있는 카탈로그의 분량을 결정합니다.
YouTube 상위 100개 채널 중 영어를 쓰지 않는 채널의 수.
- 인간 더빙 전체. 번역과 목소리까지 전부 사람이 하는 인간 더빙은 완성본 1분에 $70에서 $150: 60분짜리 작품 한 편을 한 언어로 더빙하면 $4,200에서 $9,000입니다 (2026년 더빙 비용은 얼마인가?).
- 작품별 파이프라인에서는 언어마다 대기열이 따로입니다. 작품 하나를 열 개 언어로 더빙하면 캐스팅, 녹음, 믹싱 작업이 열 건이고, 가장 느린 언어가 공개일을 정합니다.
- 오디오만 바꾸는 더빙은 입이 여전히 원본 언어로 말하게 둡니다. 시청자는 귀로 듣는 말과 어긋나는 입 모양을 읽게 됩니다 (해외에서 더빙이 어색한 이유, 스튜디오는 어떻게 고치나).
02.업로드와 함께 더빙한다는 것은 어떤 모습일까요?
연동 한 번으로 전체 흐름이 돌아갑니다: 업로드 흐름에서 요청 한 번을 보내면, API가 단계마다 상태를 알려주고, 완성된 파일은 플랫폼 자체 플레이어에서 재생됩니다.
| 단계 | 일어나는 일 | 플랫폼이 받는 것 |
|---|---|---|
| 업로드 | POST /v1/dubs에 파일 또는 원본 URL, 최대 29개 타겟 언어 코드, review=manual을 담아 보냅니다. 원본 언어는 자동 감지되거나 직접 지정합니다. | dub_id, status queued, 언어당 outputs[] 항목 하나 |
| 음성 인식과 번역 | 단어 단위 타임스탬프가 붙은 음성 인식, 화자 분리. 모든 줄이 번역 제외 목록과 컨텍스트를 적용해 번역됩니다. | status transcribing, 이어서 translating |
| 검토 | 더빙이 in_review에서 멈춥니다. 언어별 스크립트를 GET으로 받고, 어떤 줄이든 PATCH로 수정하고, POST /render로 한 언어 또는 전체를 렌더링합니다. | dub.ready_for_review, 이어서 편집 가능한 스크립트 |
| 렌더링 | 언어별로 목소리와 립싱크를 함께 생성합니다. 각 언어는 각자의 상태를 가집니다. | 언어별 dub.output_ready; 모든 언어가 렌더링되면 dub.completed |
| 전달 | 언어당 결과물 하나: 완성본 mp4, 검토를 마친 스크립트로 만든 .srt와 .vtt 자막, 전체 오디오 믹스 또는 목소리 트랙 단독, 번역된 제목과 설명. | GET /v1/dubs/{dub_id}/output/{lang}에 format=mp4, srt, vtt, audio 또는 voice |
- 실패도 이벤트입니다. dub.failed에는 언어와 오류가 담기고, 10초 안에 응답이 없는 전송은 24시간 동안 재시도되며, 중복은 이벤트 id로 제거됩니다 (웹훅).
- 이름과 유행어는 유지됩니다. 번역 제외 목록이 말한 그대로 지키고, 한 문장 컨텍스트(화면에 누가 나오고 어떤 작품인지)가 모든 줄을 더 정확하게 만듭니다. 둘 다 크리에이터 프로필, 스트림, 작품 하나 단위로 범위를 정합니다 (번역 제외 목록, 컨텍스트).
- 메타데이터도 작품과 함께 이동합니다. 번역된 제목과 설명이 언어별로 도착하고, 링크, @핸들, #해시태그, 프로모 코드, 챕터는 그대로 유지됩니다 (메타데이터 번역).
03.왜 하나의 모델이 커버리지 계산을 바꿀까요?
이어붙인 파이프라인은 처리량과 품질을 맞바꿉니다: 도구가 하나 늘면 처리 단계와 청구서도 하나 늘고, 두 모델은 하나의 정체성을 유지할 수 없습니다. 하나의 통합 모델은 목소리와 입술, 장면까지 함께 생성합니다.
ElevenLabs는 웃음, 음악, 현장음 같은 배경음 오류가 270% 더 많았습니다.
11.92 vs 3.22 dB · ElevenLabs Dubbing v2 (Alpha) · 111쌍 · 중국어, 스페인어, 일본어 · 2026년 8월 5일Familiar의 목소리는 실제 화자와 27.8% 더 닮게 들렸고, 11개 언어 전부에서 Familiar가 더 가까웠습니다.
0.4605 vs 0.3604 · ElevenLabs Dubbing v1 · 418쌍 · 11개 언어 · 2026년 8월 5일Familiar는 음성 출력의 중요한 번역 오류를 54.7% 더 적게 냈습니다 (29건 vs 64건).
ElevenLabs Dubbing v2 (Alpha) · 270% 타일과 같은 111쌍 · 2026년 8월 5일- 번역 품질은 유지됩니다. Familiar의 번역은 프랑스어, 중국어, 힌디어, 인도네시아어 평균으로 숙련된 전문 번역가의 1차 번역 품질의 100.3%를 기록했습니다. 전문가가 다듬은 참조 번역을 기준으로 블라인드 채점한 결과(2026년 8월 6일)로, 동률입니다 (연구 보기).
- 장면은 더빙 뒤에도 살아남습니다. 음악은 절대 더빙하지 않습니다. 노래는 손대지 않고 그대로 통과하고, 웃음, 효과음, 현장음은 새 대사 아래에 그대로 남으며, 화면에 나오는 모든 화자가 각자 자기 목소리로 더빙됩니다.
04.어떤 작품부터 시작할까요?
언어별 공개가 가능해지면 계획 단위는 ‘한 언어의 작품 하나’가 됩니다: 시장은 검토를 통과한 언어부터 열립니다 (다국가 동시 론칭: 모든 시장을 한 번에 더빙하기).
| 티어 | 언어 |
|---|---|
| 1티어 (14개) | 광둥어, 독일어, 러시아어, 베트남어, 스페인어, 영어, 이탈리아어, 인도네시아어, 일본어, 중국어, 태국어, 포르투갈어, 프랑스어, 한국어 |
| 2티어 (9개) | 그리스어, 네덜란드어, 노르웨이어, 리투아니아어, 불가리아어, 스웨덴어, 슬로바키아어, 카탈루냐어, 크로아티아어 |
| 3티어 (7개) | 덴마크어, 라트비아어, 벨라루스어, 세르비아어, 아랍어, 우크라이나어, 카자흐어 |
- 가장 깨끗한 포맷부터. 카메라에 2~3명이 나오는 팟캐스트와 인터뷰, 카메라 정면 영상, 강의, 발표, 깨끗한 단일 카메라 장면.
- 1티어부터, 그다음 확장. 30개 언어 모두가 서로 간에 더빙되므로, 티어 순서가 곧 출시 순서입니다 (지원 언어).
- 리스크에 따라 나누세요. review=manual은 해당 시장의 검토자가 렌더링할 때까지 작품을 in_review에 붙잡아 두고, 기본값인 review=auto는 바로 렌더링합니다. 자막 작업은 텍스트가 검토 단계에서 만들어지므로 항상 멈춥니다.
- 방송은 별도 레인입니다. 라이브 세션은 SRT, RTMP, WHIP으로 받은 방송을 원본보다 5~9초 늦게 더빙하며, 11개 원본 언어에서 나머지 29개 언어로, 각 언어별 피드는 전용 목적지로 송출합니다. 라이브에는 검토 단계가 없습니다 (라이브 스트림 실시간 더빙).
05.보유 카탈로그로 어떻게 파일럿을 진행하나요?
- 가장 어려운 작품을 고르세요. 대표 회차 하나 또는 이어지는 회차 묶음을 우선 언어 두세 개로. 빠른 대사, 농담, 대사 아래의 음악, 고유명사, 막판 수정 한 건이 들어 있어야 합니다.
- 누가 듣기 전에 검수 기준을 먼저 적으세요. 대사, 목소리, 장면, 얼굴, 타이밍을 원어민 검토자가 각각 채점하고, 여기에 수정 횟수와 원본 변경부터 교체본 승인까지 걸린 시간을 더합니다.
- 수정 건수를 세세요. 검토 단계에서 검토자가 고친 줄의 수와 종류가 직접적인 품질 지표이며, 모든 수정은 더빙과 자막에 그대로 반영됩니다.
쌍 비교 설계, 채점표, 결과 읽는 법: AI 더빙 파일럿 진행 가이드 (2026). 이용은 Studio 계약으로, 카탈로그 규모에 맞춰 구성되며, 연간 계약 체결 시 30일 환불 보장이 적용됩니다.
질문
스트리밍 서비스는 현지 언어 더빙을 더 빨리 늘리기 위해 무엇을 쓰나요?
API를 통한 업로드 즉시 더빙입니다: 작품 하나당 요청 한 번으로 최대 29개 타겟 언어, 언어별 검토 단계, 상태가 바뀔 때마다 보고하는 웹훅, 그리고 완성본 영상, 자막, 오디오 트랙, 번역된 제목과 설명을 플랫폼 자체 플레이어에서 제공합니다.
더빙이 빨라지면 품질이 떨어지나요?
목소리, 립싱크, 장면이 하나의 모델에서 나오면 그렇지 않습니다. 같은 클립(2026년 8월 5일)에서 ElevenLabs Dubbing v2 (Alpha)는 Familiar보다 배경음 오류가 270% 더 많았습니다. Familiar의 번역은 프랑스어, 중국어, 힌디어, 인도네시아어에서 전문 번역가 1차 번역 품질의 100.3%를 기록했습니다: 동률입니다.
한 언어를 다른 언어보다 먼저 공개할 수 있나요?
네. review=manual이면 각 언어는 in_review에서 대기하고 각자의 승인에 따라 렌더링됩니다: langs 목록을 담은 POST /render로 스페인어는 오늘, 나머지는 각 검토자가 승인한 뒤에 공개합니다. 각 언어는 파일을 다운로드할 수 있게 되는 순간 자체 dub.output_ready 웹훅을 호출합니다.
비교를 위해, 인간 더빙 전체 비용은 얼마인가요?
번역과 목소리까지 전부 사람이 하는 인간 더빙은 완성본 1분에 $70에서 $150: 60분짜리 작품 한 편을 한 언어로 더빙하면 $4,200에서 $9,000입니다. 번역만 해도 공개된 단어당 요율 기준으로 말 1분에 $22에서 $45가 듭니다.
플랫폼은 어떤 언어로 더빙할 수 있나요?
30개 언어, 모든 언어 간 상호 번역: 30개 중 어느 언어의 작품이든 나머지 29개 언어로 더빙되며, 공개된 세 품질 티어로 품질이 높은 순으로 나뉩니다. 1티어는 14개, 2티어는 9개, 3티어는 7개 언어이고, 티어 안에서는 가나다순입니다.
참고 자료
더빙, 드디어 좋아졌다. 측정 결과를 확인하신 뒤, 보유 카탈로그에 대해 팀과 상담해보세요.
FAMILIAR · 론칭 영상 · 2:31