우리의 미션

우리는 이해를 가로막는 모든 장벽을 없애기 위해 존재합니다.

01이야기

이 일이 시작된 곳.

저희 CEO Andrew Liu가 들어간 학교에서, 그는 반 친구들에게 영어 한마디 건넬 수 없었습니다. 학교 전체에 아시아인은 그 한 명뿐이었고, 친구도 없었습니다. 영어는 TV를 보며 배웠습니다. 마침내 영어가 그에게 닿은 곳은 화면이었습니다. 그 시절은 한 번도 그를 떠난 적이 없습니다.

Familiar Labs가 존재하는 이유입니다: 화면에 나오는 것이 모두에게, 각자 이해하는 언어로 닿도록.

아티스트를 대체하지 않습니다. 번역합니다.

02경계

사람을 지킵니다.

엔터테인먼트는 2030년이면 4조 2,000억 달러 규모의 산업이 됩니다.

PwC, 글로벌 엔터테인먼트 & 미디어 전망 2026–2030.

그 미래는 대량 생산과 예술 사이의 가느다란 경계 위에 놓여 있고, Familiar Labs는 예술 쪽에 섭니다: 사람의 연기와, 그 연기가 전하는 공감을 지키는 쪽입니다.

예술예술이란

노력과 창의성. 둘 중 하나, 또는 둘 다.

AI도 자기 자리에서는 예술을 만들 수 있습니다. 애니메이션이 이미 지켜 온 자리입니다: 소설과 만화, 웹툰을 실제 배우의 정체성 없이 화면으로 옮기는 일. 하지만 연기했어야 할 배우를 대신하려고 AI가 실사 같은 사실감을 좇으면 결과는 공허해집니다. 관객이 보러 온 것은 사람이기 때문입니다.

노래도 랩도, 사람이 하길 바랍니다.

노래는 살아온 삶에서 나오는 연기입니다. 남이 쓴 가사라도 부르는 사람이 그것을 해석하고, 우리가 느끼는 건 바로 그 해석입니다. 완전히 생성된 노래는 아무도 귀 기울이지 않는 곳이라면 괜찮습니다: 광고나 매장 배경음악처럼요.
03왜 젊은 세대인가

가장 어린 관객이 진짜를 원합니다.

Z세대는 지금껏 가장 안목 있는 관객입니다. 크리에이터의 진짜 개성을 보고 팔로우하고, 진짜 사람을 봅니다.

스트리머
스포츠
뉴스
쇼호스트

우리는 사람과의 연결을 갈망합니다: 한 사람의 개성, 말로는 설명할 수 없는 그 무엇. 사람은 사람에게 공감하고, AI라는 걸 아는 순간 공감은 떨어집니다.

04퍼포머

배우와 가수는 사람으로 남습니다. 대부분은.

수십 년이 지나도, 사람 퍼포머가 없는 영화, 드라마, 음악은 소수일 겁니다. 배역을 살아 내는 아티스트를 AI가 왜 대신하겠습니까?

앞에 서는 건 사람
퍼포머는 우리의 시선을 붙잡는 사람입니다: 배우, 가수, 리프 하나로 노래를 끌고 가는 기타리스트.
배경은 AI에게
CG, 시각 효과, 그리고 아마 보조 출연자까지, 기술이 충분히 좋아지면. 그건 제작의 영역이고, 괜찮습니다.
AI로 만든 예술
AI도 정말 훌륭한 작품을 만들 겁니다. 큰 노력과 높은 창의성으로. 저희는 환영합니다.
이런 장면
“AI라는 걸 알면, 같은 감정을 느낄 수가 없어요.”
Andrew Liu | CEO

언젠가 AI가 이 정도 퀄리티에 닿는다고 해도, 공감은 여전히 빠져 있을 겁니다. 사람과 사람 사이의 연결, 그리고 이걸 만든 사람들을 응원하고 싶은 마음 말입니다.

영화 〈라라랜드〉(2016)의 엔딩, 7:47부터

그래도 우리가 응원하기로 고르는 건 대부분 사람일 겁니다. 사람에게 느끼는 공감은 시간이 지나면 사라질 편견이 아닙니다. 우리가 살고, 사랑하고, 언어를 쓰는 방식 그 자체입니다.

05벽

언어는 언제나 사람과 사람 사이의 벽이었습니다.

  • 아이의 선생님과 이야기하지 못하는 부모.

  • 증상을 설명하지 못하는 환자.

  • 법정의 언어로는 자기 말을 전하지 못하는 증인.

06무엇인가

지루한 반복 작업은 MLFM에게.

최초의 멀티모달 번역 파운데이션 모델
  • 당신의 영상, 당신의 목소리, 당신의 얼굴. 새로 지어내는 것은 없습니다.
  • 프롬프트도 없고, 무작위로 새로 만들어내지도 않습니다.
  • 학습에 쓴 데이터는 전부 Familiar Labs 팀이 직접 만들었습니다.

텍스트, 오디오, 영상을 아울러 무엇을 어떻게 현지화할지 결정하고, 꼭 필요한 선택지는 직접 보여 주는 하나의 모델입니다. 번역을 먼저 정하고, 그다음 목소리, 입 모양, 장면까지 한 번에 더빙합니다. 모든 결정을 한 모델이 내리기에 결정끼리 어긋나지 않습니다. 사람은 언제나 그대로입니다.

'생성형 AI'가 아닙니다. 창작자를 돕는 번역입니다.

저희는 창작 과정을 돕는 또 하나의 도구입니다.

번역

대사 한 줄을 어떻게 옮길지.

지금
  • 여러 번역안을 견주고, 크리에이티브 디렉터가 그 근거와 함께 보고 고릅니다.
  • 무엇을 번역하지 않을지: 속어는 말한 그대로, 이름과 브랜드는 원래대로.
  • 레퍼런스는 관객이 아는 것으로 바꾸고, 그 문화권에서 피하는 표현은 피하고, 어린 시청자용 버전은 욕설 수위를 낮춥니다.
오디오

애초에 무엇을 번역할지부터.

지금
  • 주 화자의 목소리를 찾아, 본인의 목소리 그대로 옮깁니다.
  • 웃음소리, 관중의 함성, 외침, 누구인지 알아듣기 힘든 말소리: 원래 그대로 둡니다.
준비 중
  • 구호, 고함, 특정 문구는 원어 그대로.
영상

화면에서 무엇을 현지화할지.

지금
  • 실제로 말하는 사람이 누구인지: 내레이션하는 사람, 화면 밖에서 말하는 사람까지.
  • 입 모양, 오클루전과 공간 추론까지 포함해서.
  • 강조나 문화가 요구할 때는 표정과 제스처까지.
준비 중
  • 휴대폰 화면, 책 표지, 거리 표지판, 가게 간판 같은 화면 속 글자를 이미 정해 둔 용어로.
  • 촬영된 그대로 둘 것은 그때그때 결정: Tostitos 봉지는 Tostitos 그대로.
  • 대사가 어느 얼굴의 것인지, 어떤 글자를 번역할지.
07시작점

우리는 그 벽의 대가가 가장 큰 곳, 영상부터 시작합니다.

74%영어를 쓰지 않는 인터넷 사용자의 비율

인간 더빙은 세상 대부분에게 쓸 수 없는 선택지입니다: 비용과 인력, 시간 때문에 대작조차 몇 개 언어로만 더빙합니다. 규모가 작은 작품, 시리즈, 숏드라마는 아예 더빙하지 않습니다.

저희 CTO가 이끌던 회사가 Veritasium, 3Blue1Brown, Welch Labs의 국제 채널을 몇 년째 운영하며 그것을 증명해 왔습니다.

▚ 몇 주가 아닌 한 번에 ▞

FAMILIAR LABS · 한 번에
Familiar LabsFamiliar Labs
보조형 비주얼 더빙 · 몇 주
FlawlessFlawless
한 번에 끝내는 도구 · 통제권 없음
HeyGenHeyGenElevenLabsElevenLabs

지금 업계가 쓰는 보조 도구는 프로젝트마다 VFX 아티스트 팀과 몇 주가 필요하고, 언어마다 새 프로젝트가 됩니다.

업로드
FAMILIAR LABS · 한 번에한 번 올리면, 모든 언어로 나옵니다.
보조형 비주얼 더빙 · 몇 주마스터와 언어별 더빙 오디오 트랙, 그다음 몇 주간의 VFX 작업.
한 번에 끝내는 도구 · 통제권 없음한 번 올리면, 나오는 대로 받아야 합니다.품질이 매우 낮습니다.번역을 검토할 방법이 없습니다.
번역
FAMILIAR LABS · 한 번에더빙을 만들기 전에 크리에이티브 디렉터가 검토합니다. 여러 뜻으로 읽힐 수 있는 대사는 세 가지 번역으로 돌아옵니다.
보조형 비주얼 더빙 · 몇 주도구를 돌리기 전에, 직접 준비해 온 더빙 트랙 안에서 이미 끝나 있습니다.
한 번에 끝내는 도구 · 통제권 없음현재 모델에서는 Enterprise API가 아니면 수정할 수 없습니다. 수정할 수 있는 편집 도구는 유지보수 모드인 이전 모델입니다.
사운드
FAMILIAR LABS · 한 번에화자 본인의 목소리. 음악, 웃음소리, 현장음은 그대로 남습니다.
보조형 비주얼 더빙 · 몇 주직접 준비해 온 더빙 트랙에 담긴 것이 전부입니다.
한 번에 끝내는 도구 · 통제권 없음목소리는 화자에게서 멀어지고, 음악과 현장음은 빠집니다.
누가 말하는가
FAMILIAR LABS · 한 번에화면 속 누가 말하는지 모델이 결정합니다.
보조형 비주얼 더빙 · 몇 주아티스트가 모든 프레임의 모든 얼굴을 잘라 내고 직접 판단합니다.
한 번에 끝내는 도구 · 통제권 없음립싱크는 짐작에 맡깁니다. 화면에 여러 사람이 나오면 엉뚱한 입이 움직입니다.
어려운 장면
FAMILIAR LABS · 한 번에손, 마이크, 빠른 움직임, 블러, 여러 목소리: 오클루전과 공간 추론까지 한 번에.
보조형 비주얼 더빙 · 몇 주하나하나 검수 전에 손으로 고칩니다.
한 번에 끝내는 도구 · 통제권 없음얼굴을 가린 손, 마이크, 블러, 보케, 옆모습: 립싱크가 깨집니다.

지금 한 번에 끝내는 도구들은 나머지를 포기합니다: 번역은 수정할 수 없고, 음악과 현장음은 빠지고, 목소리는 화자에게서 멀어지며, 얼굴을 가린 손, 마이크, 블러, 보케, 옆모습, 화면 속 여러 사람 앞에서 입 모양이 무너집니다. 공간에 대한 추론도, 세상에 대한 이해도, 통제권도 없습니다.

Familiar Labs vs Flawless TrueSync →
08우리의 역할
++
사람에서 사람으로, 더 넓은 세상에 닿습니다.

한 사람이 보여 준 연기를 모든 언어로 옮깁니다. 목소리도, 얼굴도, 터져 나오는 외침과 속삭임까지 그대로.

저희는 사람을 생성하지 않습니다. 배우를 대체하지 않습니다.

  1. 지금

    13개 언어로 더빙합니다.

  2. 준비 중

    생중계: 스포츠, 뉴스, 스트리밍.

  3. 이후

    양방향: 회의에서, 그리고 같은 공간에서.

새로운 사람을 만들어 낼 수 있었던 연구자들이, 실제 사람을 옮기는 길을 택했습니다.

09노래

생성이 아닌, 더빙.

저희는 AI 음악 생성의 정반대에 서 있습니다. 사람을 대체하는 데 반대합니다. AI는 바로 이런 데 쓰여야 합니다: 문화가 달라도, 같은 노래를 함께 이해하는 일.

저희 CEO Andrew Liu는 오디오 마니아이자 음악가입니다: 피아노, 첼로, 베이스 기타를 연주합니다. 그의 어머니는 좋아하는 노래를 들려주고, 직접 불러 주기도 합니다. 그는 중국어를 조금 알아듣지만, 노래가 되면 가사가 귀를 스쳐 지나갑니다. 우리 부모님과 가족은 우리가 따라가지 못하는 노래를 사랑하고, 우리는 그분들이 따라가지 못하는 영어 노래를 사랑합니다. Song Dubbing은 그 둘을 모두 전합니다: 그분들의 노래는 우리에게, 우리의 노래는 한국어와 중국어로 그분들에게. 그래서 그분들도 이해하고 함께 듣습니다. 팀 모두 노래와 노래방을 좋아합니다. 우리 모두 듣는 노래의 가사를 이해하고 싶어 합니다.

번역된 이 노래들, 제 플레이리스트에 넣고 싶어요.
Jaeseok Jeong | 책임연구원

Song Dubbing최초의 진짜 노래 더빙

알고 있는 그 노래를, 같은 가수의 목소리로, 다른 언어로. 지금까지 노래가 언어를 건너는 길은 다시 부르는 것뿐이었습니다: 아티스트 본인이, 다른 가수가, 혹은 새로 만든 보컬이. 여기서는 아무도 다시 부르지 않고, 원래의 연기가 그대로 옮겨집니다.

음반사와 소속 아티스트를 위해, 앨범 단위의 전담 밀착 서비스로 진행합니다. 모든 소절을 부를 수 있게 번역해 음절, 라임, 플로우, 의미를 지키고, 공개 전에 아티스트가 모든 언어의 가사를 직접 승인합니다.

10왜 캐나다인가

뿌리는 캐나다, 무대는 세계.

Familiar Labs는 토론토에 기반을 두고, EU와 전 세계의 친구들과 함께 일합니다. 이 뿌리가 가리키는 방향은 분명합니다: 사용자가 적은 언어까지, 어디서든 언어 장벽을 허무는 것.

지금

13개 언어, 어떤 언어에서 어떤 언어로든.

  • 독일어
  • 러시아어
  • 스페인어(라틴 아메리카)
  • 아랍어
  • 영어
  • 이탈리아어
  • 일본어
  • 중국어
  • 태국어
  • 포르투갈어(브라질)
  • 프랑스어(프랑스)
  • 한국어
  • 힌디어
로드맵
퀘벡 프랑스어.
로드맵
캐나다 원주민 언어.

온타리오주 북부, 티민스.

저희 CEO가 자란 곳입니다. 백인 아이들과 퍼스트 네이션스 아이들이 함께 다니는 초등학교였습니다. 친구들은 혼혈이거나 퍼스트 네이션스였고, 너무 오래 외면받아 온 공동체 출신이었습니다. 그들의 언어도 마찬가지였습니다. 온타리오 북부는 재미있는 곳입니다.

우리의 비전: 누구나 이해받는 세상.

11가치

우리는 저질 AI 콘텐츠와 딥페이크에 반대합니다.

합성이 아닌, 사람의 편.

당신의 목소리와 얼굴 그대로.

저질 AI 콘텐츠 반대, 동의가 기본.

대체가 아니라, 오직 번역. 모든 결과물에 동의 확인과 출처 기록을 남깁니다.

이론이 아니라, 증명.

ElevenLabs, YouTube, 인간 번역가와 동일 클립으로 비교한 벤치마크를 공개했습니다.

통제권, 기본 탑재.

공개 전 검토가 기본입니다. 브랜드명과 용어는 적힌 그대로 유지됩니다.

딥페이크 없음오직 번역
▚ 팀 ▞

마음을 담아 연구하고 만들었습니다

Andrew Liu
Andrew LiuCEO접근 승인자
Jibin Song
Jibin Song수석 과학자제2 키 보관자 | 변경 승인자
Mingi Kwon
Mingi KwonCTO보안 책임자 | 키 보관자 | 삭제 책임자
Google Scholar ↗
Jaeseok Jeong
Jaeseok Jeong책임연구원콘텐츠 취급자
Google Scholar ↗
Michael Chan
Michael ChanCBO사고 대응 책임자
Taehwan Lee
Taehwan Lee기술 스태프
Tonghyun Lee
Tonghyun Lee기술 스태프
Prof. Xu Zheng
Prof. Xu Zheng자문위원
Prof. Youngjung Uh
Prof. Youngjung Uh자문위원
Google Scholar ↗
▚ 연구 ▞
음성과 영상을 함께 생성

목소리와 얼굴이 하나의 모델에서 나오기 때문에, 정체성이 둘로 갈라질 수 없습니다. JAM-Flow로 저희가 개척한 분야입니다.

실시간 인물 영상 생성

오늘날 가장 사실적인 실시간 인물 영상 생성: SoulX-LiveAct는 초당 20프레임으로 인물을 구현하고, 한 시간 동안 안정적으로 이어 갑니다.

영상 생성 가속

증류, 가이던스, 샘플링: 디퓨전 모델을 실시간에 쓸 수 있을 만큼 빠르게 만드는 연구입니다.

디퓨전 모델 내부 편집

고정된 디퓨전 모델 안에서의 편집: h-space의 발견부터 스타일 제어, 화면 위 텍스트 제거까지.

멀티모달 인식

편집하기 전에 장면부터 읽습니다. 어떤 환경에서든, 영상과 소리를 함께 보고 누가 말하는지 알아냅니다.

2021년 이후 인용 10,000회 이상, ICLR, NeurIPS, CVPR, ECCV 등에서 논문 100편 이상 발표.

투자사

  • Wheelhouse
  • Maximum Effort
  • Stanford
  • Yonsei
  • University of Waterloo