选型指南

如何评估 AI 歌曲翻译:要问的 6 个问题

FAMILIAR LABS 研究全部文章

摘要

评估任何 AI 歌曲翻译或歌曲配音工具,都要问六个问题:成品是谁的声音在唱;歌词是否保住了意思、韵脚和音节;歌词由谁认可;MV 怎么处理;交付哪些母带;记录了哪些版权和授权。Familiar Labs 的歌曲配音(Song Dubbing)在下文逐一作答。
6 个问题写给唱片公司写给制片方

成品是谁的声音在唱?

艺人本人,每种语言再唱一遍
公开的例子
MIDNATT 的《Masquerade》(2023)六种语言全部由李贤录制。
另一位歌手,再转成艺人的音色
公开的例子
Lauv《Love U Like That》的韩语人声由 Kevin Woo 演唱(2023);《Rockin' Around the Christmas Tree》新录的西班牙语人声被转成了 Brenda Lee 的声音(2024)。
新生成的人声
公开的例子
根据提示词生成新歌的 AI 音乐生成工具。

歌曲配音带过去的是艺人自己录下的演唱,所以歌迷熟悉的那一版,就是他们听到的那一版。这是首个真正意义上的歌曲配音:在此之前,一首歌要唱进另一种语言,只能重新唱一遍(由艺人本人、另一位歌手,或为它另做的一段人声来唱);而在这里,一句都不用重唱。

歌词保住了意思、韵脚和音节吗?

印地语我们试了两次,但印地语的咬字和格律,和西方的节奏就是对不上,我们实在做不出来。
Terry McBride,Nettwerk Music Group,谈艾薇儿的《Girlfriend》,CBC,2007 年

《Girlfriend》推出了另外七种语言的版本,印地语版却没有:一句歌词的音符数是固定的。请供应商把每句歌词和回译并排展示,对照音符数出音节。歌曲配音:每句的音节绝不少于原句,押韵格局照原样再现,意思绝不为了押韵而扭曲。歌词翻译:韵脚与音节一文逐句讲解。

MV 怎么处理,交付哪些母带?

MV

口型跟上新歌词

最高 4K。

混音

可直接发行的立体声

24-bit PCM WAV,动态范围 144 dB。

人声

只含人声的音轨

歌曲配音三样都交付。只有音频的版本,会让嘴唇在唱听众已经听不到的词;压缩过的试听文件也没法做母带。

歌词由谁认可,记录了哪些版权?

不经艺人拍板就发布的工具,是在替艺人说话。

德语版《汉密尔顿》创作时,林-曼努尔·米兰达每三个月用三栏审阅一次:他的英文原词、德语译词和回译。歌曲配音始于艺人的同意,由唱片公司随专辑一起提供,发行之前每一句都由艺人拍板。
  • 词曲作品。 按照美国版权法,翻译属于“演绎作品”(17 U.S.C. § 101):翻译后的歌词需要发行商和词曲作者授权。
  • 录音。 母带由唱片公司掌握。
  • 声音。 田纳西州的 ELVIS 法案于 2024 年 3 月 21 日签署,把声音列为人格权利。要求拿到艺人的书面同意。
  • 认可。 环球音乐集团在征得 Brenda Lee 认可后发行了她的西班牙语版。要问清每一句由谁、在何时认可。

六个回答,放在一起

歌曲配音

歌手,始终还是那位歌手。

歌曲配音首批支持演唱的有英语、法语、德语、意大利语、韩语、普通话、葡萄牙语、俄语和西班牙语。听听一首配音后的歌曲与原版的对照,或读歌曲配音一文。这是面向唱片公司的专人全程服务:给团队发邮件,告诉我们专辑。

常见问题

歌曲配音和声音转换的翻唱有什么区别?

声音转换的版本,从另一位歌手新录的演唱出发,把音色改得像艺人。Familiar Labs 的歌曲配音从艺人自己的录音出发,所以乐句、换气和情感都是艺人的。

一种我不会的语言写成的歌词,怎么检查?

每句要三栏:原词、新词、译回原语言的回译,并对照旋律数出音节。

AI 歌曲翻译需要发行商的许可吗?

通常需要。美国版权法把翻译列为演绎作品,所以翻译后的歌词需要发行商和词曲作者授权。每个地区都请与你的法务团队确认。

参考资料

  1. [1]The Korea Times,HYBE 为 MIDNATT 的多语言单曲使用 AI 声音技术,2023 年 5 月 15 日
  2. [2]NME,Lauv 借助 AI 和一位前 K-pop 偶像推出韩语版《Love U Like That》,2023 年
  3. [3]ABC News,Brenda Lee 的西班牙语版《Rockin' Around the Christmas Tree》,2024 年 10 月 25 日
  4. [4]The Daily Utah Chronicle,艾薇儿的《Girlfriend》及其外语版本,2021 年 4 月 5 日
  5. [5]NPR,这一版《汉密尔顿》全程用德语,2022 年 10 月
  6. [6]17 U.S.C. § 101,定义(康奈尔大学法律信息研究所)
  7. [7]美联社经 News4JAX,田纳西州成为首个保护音乐人免受 AI 侵害的州,2024 年 3 月 21 日
  8. [8]歌曲配音:同一位歌手,唱你的语言

多模态翻译

Familiar Labs 用多模态本地化基础模型(MLFM),让配音迎来代际飞跃。这是首个多模态翻译基础模型:一个模型决定本地化什么,覆盖文本、音频和画面,并把选择摆到你面前。你的声音与口型,带进新的语言。团队7人,汇聚多位博士;投资方包括 Samsung、RedBird、Gold House。 我们的使命