창작 과정을 돕는 또 하나의 도구

01. 규칙은 한 번만 정합니다

첫 줄을 옮기기도 전에 모든 번역을 좌우하는 두 가지가 있고, 팀은 콘솔이나 API에서 크리에이터별로 또는 영상별로 둘 다 정합니다:

범위가 좁은 설정이 우선합니다: 영상 하나에 건 규칙은 그 영상에서만 크리에이터 기본값을 덮어씁니다.

02. 살아나는 대사를 고릅니다

어떤 대사는 여러 방식으로 읽힐 수 있습니다. 말장난, 뼈 있는 말, 배우의 표정에 따라 진심으로도 비꼼으로도 들리는 문장. 이런 대사는 세 가지 번역안으로 돌아오고, 각각에 의도와 감정이 표시됩니다: 말장난을 살린 멋쩍은 버전, 뜻만 살린 진지한 버전, 새 농담으로 바꾼 장난스러운 버전. 크리에이티브 디렉터는 속어를 말한 그대로 두거나 더 어린 시청자용 버전에서 욕설 수위를 낮출 때처럼 그중 하나를 고릅니다. 인물이 무슨 뜻으로 말했는지는 끝까지 팀이 정합니다.

03. 원본과 대조해 고칩니다

번역된 모든 줄은 원문 옆에 놓이므로, 두 언어를 아는 검토자라면 렌더링 전에 어느 줄이든 다시 쓸 수 있습니다. 콘솔에서는 모든 영상이 이 검토 화면에서 멈추고, 팀이 승인하기 전에는 아무것도 렌더링되지 않습니다. 흐름을 믿는 팀은 이 단계를 건너뛸 수도 있습니다. API에서는 같은 관문이 설정 하나이고, 검토자가 통과시키는 대로 언어별로 더빙을 내보낼 수 있습니다.

04. 돌아오는 파일

언어마다 편집실이나 업로드 대기열에 바로 넣을 수 있는 상태로 도착합니다:

더빙은 어디에든 올릴 수 있는 여러분의 것입니다.

05. 누가 무엇을 정하나

창작의 결정은 모두 팀이 쥡니다. MLDM은 아무도 서른 번씩 하고 싶지 않은 일을 맡습니다.

모델이 내린 모든 결정은 더빙 작업과 함께 기록되고, 어떤 결정이든 직접 바꿀 수 있습니다. 지금은 번역 선택지를 볼 수 있습니다. 원어 그대로 남길 소리, 화자가 될 얼굴, 그리고 이미 정해 둔 용어로 옮길 화면 속 글자를 고르는 기능은 준비 중입니다.

HeyGenElevenLabsHeyGen + ElevenLabsONE-SHOT TOOLS · NO CONTROL

One shot today means giving up the rest.

The one-shot tools today give up the rest: the translation cannot be edited, the music and the room drop out, the voice drifts, and the lips fail on a hand over the face, a microphone, blur, bokeh, a side view or several people in frame. No spatial reasoning, no understanding of the world, no control. ElevenLabs' current Dubbing v2 edits only through an Enterprise API, and its full editor is the older model, in maintenance mode; HeyGen stitches a lip-sync over a dub like that, and the lip-sync breaks on the ordinary shots of any episode. Familiar is one shot and the quality: translation first, reviewed; then the voice, the lips and the scene together, through the hard shots.

54.7%

FEWER TRANSLATION ERRORS · FAMILIAR VS ELEVENLABS DUBBING V2

270%

ELEVENLABS MORE BACKGROUND-SOUND ERROR · THE LAUGHTER, THE MUSIC, THE AMBIENCE

+27.8%

FAMILIAR CLOSER TO THE REAL SPEAKER

FAMILIAR · ONE SHOT AND THE QUALITYFamiliar vs Flawless TrueSync →The ElevenLabs study →The demos →

06. 지루한 반복 작업은 MLDM에게.

MLDM은 대사 한 줄 한 줄, 언어 하나하나 이어지는 반복을 맡습니다. 지금 높은 품질에 이르는 길은 이 일을 보조형 도구와 VFX 아티스트 팀, 프로젝트마다 몇 주를 들여 하고, 언어마다 새 프로젝트가 됩니다. 지금의 한 번에 끝내는 도구는 빠르지만 통제권을 포함해 나머지를 포기합니다: 나오는 대로 받아야 합니다. Familiar는 한 번에, 그리고 품질까지 갖춥니다. 톤, 유머, 의미에 대한 판단은 작품을 만든 사람들에게 남고, 그 판단을 내리는 곳이 검토 화면입니다.

++

학습에 쓴 데이터는 전부 Familiar 팀이 직접 만들었습니다.

07. '생성형 AI'가 아닙니다. 창작자를 돕는 번역입니다.

프롬프트가 없습니다. 새로 지어내는 것도 없습니다. 전통적인 의미의 생성형 AI는 프롬프트로 새 콘텐츠를 만들고, 새로운 것을 만드는 데는 좋은 방법입니다. 더빙에는 그 반대가 필요합니다: 영상이 들어가면, 같은 배우와 같은 연기, 같은 타이밍이 다른 언어로 나옵니다. Familiar는 멀티모달 번역 도구입니다. 이 노선을 택한 이유를 CEO가 직접 풀어 썼습니다: 사람에서 사람으로, AI에서 AI로가 아니라.

질문