일대일 벤치마크

Familiar vs YouTube 자동 더빙: 고정 코호트 연구

FAMILIAR 연구수정일 전체 글

초록

고정된 50쌍 코호트(아랍어, 스페인어, 프랑스어, 힌디어, 한국어; 2026년 8월 8일 수집)에서 Familiar는 YouTube 자동 더빙보다 화자 유사도가 182.9% 높았고(0.399 vs 0.141), 바뀌거나 빠진 핵심 내용은 70.3% 더 적었습니다(528개 중 43개 vs 145개). YouTube는 배경음 오류가 232.6% 더 많았습니다(11.21 vs 3.37 dB). 발성 이벤트에서도 Familiar가 앞섰습니다. 쓸 만한 자동 더빙이 있던 원본 클립은 43개 중 25개였고, Familiar는 43개 모두 더빙했습니다. 전체 데이터와 동기화된 샘플 6개: YouTube 벤치마크 전체 보기.

방법

비교 쌍

50

고정 코호트. 원본 클립 하나 × 타겟 언어 하나.

언어

5

아랍어, 스페인어, 프랑스어, 힌디어, 한국어.

수집일

2026년 8월 8일

제공 여부

43개 중 25개

쓸 만한 YouTube 자동 더빙이 있던 원본 클립. Familiar는 43개 모두 더빙.

쌍 비교, 블랙박스
채점 방식원본 클립 하나 × 타겟 언어 하나. 두 시스템의 최종 오디오 전체.
타이밍에 민감한 지표
채점 방식원본 타임라인 정렬을 독립적으로 검증한 31쌍만 사용(40 ms 기준, 불확실한 레인은 제외 처리).
이벤트 지표
채점 방식사람이 웃음이나 리액션 구간을 검증한 14개 레인.
YouTube 더빙이 없는 레인
채점 방식따로 명시하고, 0점으로 채점하지 않습니다.
의미 검토
채점 방식실제로 나온 음성을 평가합니다. 타당한 의역과 아주 작은 배경 리액션은 오류로 보지 않으며, CER/WER은 제외합니다.

목소리: YouTube는 낯선 사람의 목소리

YouTube 자동 더빙은 낯선 사람의 목소리로 말하고, Familiar는 원래 화자의 목소리를 지킵니다.

정확히 정렬된 31쌍에서 측정한 실제 화자와의 화자 유사도:

FIG. 01 · 화자 유사도 (SIM-O) · 정렬된 더빙 31쌍 · FAMILIAR +182.9%
FAMILIAR0.399
YOUTUBE0.141

의미

검토한 더빙 50개에 담긴 원본의 핵심 내용 528개 중 YouTube는 145개를 바꾸거나 빠뜨렸고, Familiar는 43개였습니다.

FIG. 02 · 바뀌거나 빠진 원본 핵심 내용 · 528개 중 · FAMILIAR 70.3% 더 적음
YOUTUBE145
FAMILIAR43
34/50

음성 의미에 중요한 문제가 있는 YouTube 더빙

18/50

음성 의미에 중요한 문제가 있는 Familiar 더빙

12 vs 0

치명적인 의미 실패, YouTube vs Familiar

장면과 리액션

FIG. 03 · 배경 스펙트럼 오류 · 말소리 없는 구간 · YOUTUBE +232.6%
YOUTUBE11.21 dB
FAMILIAR3.37 dB
0.998 vs 0.236

웃음/리액션 형태 상관계수 · 이벤트 레인 14개

0.11 vs 3.36 dB

웃음/리액션 음량 오류 · 이벤트 레인 14개

25/43

쓸 만한 YouTube 자동 더빙이 있던 원본 클립. Familiar는 43개 모두 더빙

Familiar는 완성된 더빙을 최대 4K 화질과 리얼 5.1채널 서라운드 또는 스테레오 믹스로 납품합니다.

한계

수집한 코호트에 대한 고정 블랙박스 연구이며, 모든 YouTube 더빙, 모든 언어, 향후 플랫폼 버전에 대한 주장이 아닙니다.
코호트 한정
사람이 직접 들은 연구가 아니라 모델 진단 지표이며, 불확실성이 큽니다.
예측 자연스러움 · UTMOS 2.12 VS 1.85
기술적 참고치이며, 구간이 0에 닿습니다.
순간음 타이밍 · 1.000 VS 0.789 F1

참고 자료

  1. [1]Familiar vs YouTube 자동 더빙: 전체 결과, 방법, 직접 들어볼 샘플
  2. [2]Familiar 벤치마크 전체: ElevenLabs, YouTube, 인간 번역가
  3. [3]YouTube 고객센터: 자동 더빙 사용하기
  4. [4]YouTube 자동 더빙 리뷰: 직접 측정한 결과

멀티모달 번역

Familiar Labs는 멀티모달 현지화 의사결정 모델(MLDM)로 한 세대 앞선 더빙을 만듭니다. MLDM은 최초의 멀티모달 번역 파운데이션 모델로, 텍스트, 오디오, 영상을 아울러 무엇을 현지화할지 하나의 모델이 결정하고 그 선택지를 직접 보여 줍니다. 당신의 목소리와 입 모양 그대로, 새로운 언어로. 박사들이 모인 8명의 팀으로, Samsung, RedBird, Gold House가 투자했습니다. 미션 보기