摘要
一气呵成,不必数周
Flawless TrueSyncFlawless TrueSync辅助式 AI 视觉配音
另一头,如今的一键式工具快是快,其余的却都放弃了:译文改不了,音乐和现场环境音消失,声音跑偏;手挡在脸前、麦克风、虚焦、焦外虚化、侧脸,或者画面里有好几个人,口型就对不上,没有空间推理,也不理解真实世界。Familiar 一气呵成,质量也在:它接收成片,交回配音,上传一次就出每一种语言,每个决定都有记录。
一气呵成 · FAMILIAR
- 上传。上传一次,每种语言都能出片。
- 谁在说话。由模型判断画面里是谁在说。
- 高难镜头。手、麦克风、快速运动、虚焦、多人同时说话:照样一气呵成。
数周 · 辅助式视觉配音
- 上传。每种语言都要一份母版加一条配音音轨,再做数周视效。
- 谁在说话。视效师逐帧裁出每一张脸,再靠人工判断。
- 高难镜头。每一处都得在审片前手工修好。
数周都花在了哪里
一个辅助式视觉配音项目,每部作品、每种语言都要走一遍:
- 01
放进母版,以及一条已经用目标语言录好的配音音轨。
- 02
模型把画面上的每一段表演与新台词同步。
- 03
剩下的由一支视效团队完成:逐帧裁出每一张脸,人工判断是谁在说话,再修好各种遮挡(手、麦克风、挡在脸前的物体)、快速运动、虚焦和焦外虚化,以及多人同时说话的镜头。
- 04
团队以 8K 审核成果。
- 05
通过 Pixelogic 或 Deluxe 交付。
每个项目都要数周,而且每种语言都是一个新项目。
Flawless 把视觉配音描述为让表演与新台词同步,“在人工编辑监督下”完成;8K 审核以及通过 Pixelogic 和 Deluxe 交付,都写在它的本地化页面上。唯一公开的时间线来自电影《坠落》(Fall):替换 30 多句脏话“用了两周”。
One shot today means giving up the rest.
54.7%
FEWER TRANSLATION ERRORS · FAMILIAR VS ELEVENLABS DUBBING V2
270%
ELEVENLABS MORE BACKGROUND-SOUND ERROR · THE LAUGHTER, THE MUSIC, THE AMBIENCE
+27.8%
FAMILIAR CLOSER TO THE REAL SPEAKER
两者各做什么
FLAWLESS TRUESYNC
- 脸:画面上的每一段表演与新台词同步;不生成、不替换任何面孔。
- 声音:来自你的配音,由配音演员或其他任何来源录制;TrueSync 与音频无关,不生成、不修改、不合成音频。
- 为单部作品而生:电影人、导演签字、院线发行。
FAMILIAR
- 脸:跟着新台词走:嘴、下巴、眼神、眉毛、脸颊、头部;镜头里有多个人;手和麦克风挡在脸前。
- 声音:演员本人的声音说新的语言;实测比 ElevenLabs Dubbing v1 更接近真实说话人 27.8%。
- 为片库而生,在成片之后:手握成千上万部成片、身边没有制作团队待命的平台、发行方和电视网。
一部作品在两者中如何流转 · FLAWLESS 的信息取自其本地化页面,2026 年 9 月 18 日
FLAWLESS · 分辨率
8K
可上院线
FAMILIAR · 分辨率
最高 4K
目前
FLAWLESS · 音频
你的配音混音
由制作方提供的配音混音
FAMILIAR · 音频
原生 5.1 或立体声
原生 5.1 环绕声或立体声混音,与场景一起渲染,24 位 PCM
FLAWLESS · 语言
任意
你的配音用哪种语言录制都可以
FAMILIAR · 语言
30
输出语言;素材可以是 99 种源语言中的任意一种
辅助式视觉配音的强项
单部作品的院线发行,制作团队全程在场。Flawless 自己的里程碑就是例子:《Watch the Skies》原名《UFO Sweden》,通过 TrueSync 从瑞典语变成英语,成为首部在影院上映的视觉配音电影;它的制片人称之为电影行业的颠覆性变革。
TrueSync 保留原始表演。它调整面部动画以匹配新的台词,不会生成、替换或合成面孔。
- 8K 审核与交付。Familiar 目前最高渲染 4K。如果是 IMAX 或高端院线母版,能达到这个分辨率的是辅助式流程。
- 以导演的标准作为质检线。每一段表演都由创作它的人亲自审核。
- 保留你现有的配音。如果一部作品已经有一版片方满意的人工配音,TrueSync 会让脸去对上它,音频一点不动。
完整配音的强项
除了那一部旗舰作品之外的一切。一个平台手握成千上万部作品,却没有导演可以打电话。辅助式流程每部作品、每种语言都需要三样平台很少具备的东西:一版录好的配音、一个人标出每句台词是哪张脸在说,以及逐个镜头的审核。完整配音在成片之后、直接用成片原样处理:存量片库、采购来的作品、多年前就已上线的剧集。
Editing the translation means their old model.
+27.8%
FAMILIAR CLOSER TO THE REAL SPEAKER · ALL 11 LANGUAGES
261%
ELEVENLABS MORE BACKGROUND ERROR · THE MUSIC, THE AMBIENCE
+243.7%
FAMILIAR ON LAUGHTER AND REACTION SHAPE
上面的实测结论来自成对的黑盒研究,公开于 ElevenLabs 基准测试和人工翻译基准测试。
作品之外
一个为单部作品而生,电影人全程在场;另一个为整个片库而生。
只要是真人面对观众的内容,Familiar 都能配音:剧集和短剧、教育、广告、企业传播、广播电视、创作者频道,全部从成片文件配成 30 种语言。
观看数据,以及它们出自谁
Flawless 在其本地化页面上公布了三个数字,各有自己的对比对象;它们为整个品类提供了论据:
流媒体观看时长是同一作品纯音频配音的 23 倍(《Vincent Must Die》,法语译英语)。Flawless 的数据。
每部视觉配音作品的独立播放次数是 9 倍。Flawless 的数据。
完播率高于普通配音。Flawless 的数据。
在你自己的作品上测什么
找任何一家视觉配音供应商跑一场戏,重点看这些:
- 一个镜头里两个人对话。每张脸都配上了各自的新台词吗?谁来标出哪张脸是哪个人?
- 手、麦克风或玻璃杯挡在嘴前。同步能撑过遮挡,还是会断掉?
- 侧脸,或者说到一半转过头去。从侧面看,嘴还对得上新台词吗?
- 对白之下有音乐的人群场景。交付的混音里,人群声和配乐怎么样了?回来的是 5.1 还是立体声?
- 声音。谁来录?在每一种语言里听起来都像演员本人吗?
- 你必须提供什么。只要母版,还是母版加上每种语言一版录好的配音?
- 人工环节。有多少镜头需要人来处理?一部 90 分钟的作品,每种语言要多久?
- 分辨率。你以什么分辨率交付:辅助式这边是 8K,Familiar 目前最高 4K。
常见问题
Flawless TrueSync 是 AI 配音工具吗?
它是辅助式 AI 视觉配音。按它自己的描述,它把画面上的脸与你提供的配音音轨同步,不生成、不修改、不合成音频。声音和翻译都来自你的配音。
Familiar 能做哪些 TrueSync 做不到的事?
翻译、演员本人的声音和场景音,与面部在同一次渲染里完成,直接用成片,镜头里的每一位说话人都覆盖。平台不必委托录配音,也不必为每部作品组建制作团队,就能给整个片库配音。
辅助式视觉配音能用在存量片库上吗?
它是一道制作工序:母版加上每种语言一版录好的配音,由制作团队标注并审核,所以要事先排进发行计划。片库里的成片如果只剩最终混音,就直接原样走完整的 AI 配音。
Familiar 能交付 8K 吗?
目前最高 4K:Studio 交付提供 ProRes 母版,通过 API 交付 mp4,配原生 5.1 环绕声或立体声混音。TrueSync 以 8K 审核和交付。
Familiar 每种语言交付什么?
配音后的画面,以 ProRes 母版(Studio 交付)或 mp4(API)提供;完整混音为原生 5.1 环绕声或立体声;只含人声的音轨,供你自己混音;根据审核过的转写生成的 srt 和 vtt 字幕,按 Netflix《定时文本样式指南》的规范切分;以及翻译好的标题和简介。
院线发行适合哪一个?
如果是导演对单部作品逐帧签字、母版是 8K,辅助式视觉配音更适合那个场合。如果要把整个片库配成 30 种语言,适合的是完整配音。
23 倍、9 倍和 260% 这几个数字是 Familiar 的吗?
不是。它们是 Flawless 公布的数据,对比的是视觉配音作品与纯音频配音和普通配音。Familiar 的实测是另外几项成对研究,对比对象是 ElevenLabs、YouTube 自动配音和专业译者,公开于 /benchmark。
参考资料
- [1]Netflix, Timed Text Style Guide: Subtitle Templates,2026 年 10 月 30 日查阅
- [2]Flawless, Localize Titles with Assistive AI Visual Dubbing (TrueSync),2026 年 9 月 18 日查阅
- [3]Flawless, What is assistive AI?,2026 年 10 月 30 日查阅
- [4]Voicebot.ai, Synthetic media AI transforms Fall movie rating from R to PG-13,2022 年 8 月 10 日
- [5]Familiar vs ElevenLabs 配音:两项成对研究
- [6]Familiar vs 专业译者:达到专业译者质量的 100.3%
- [7]辅助式 AI 视觉配音 vs 完整 AI 配音,一文讲清
- [8]AI 口型同步:是什么、缺什么、什么更好(2026)
- [9]2026 年配音要花多少钱?
多模态翻译
Familiar Labs 用多模态本地化决策模型(MLDM),让配音迎来代际飞跃。这是首个多模态翻译基础模型:一个模型决定本地化什么,覆盖文本、音频和画面,并把选择摆到你面前。你的声音与口型,带进新的语言。团队8人,汇聚多位博士;投资方包括 Samsung、RedBird、Gold House。 我们的使命
