GUIA DE COMPRA

Como avaliar a tradução de músicas com IA: 6 perguntas para fazer

FAMILIAR LABS PESQUISATODOS OS ARTIGOS

RESUMO

Faça seis perguntas a qualquer ferramenta de tradução de músicas com IA ou de dublagem de músicas: de quem é a voz que canta; se a letra mantém o sentido, a rima e as sílabas; quem aprova; o que acontece com o videoclipe; quais masters são entregues; quais direitos ficam documentados. O Song Dubbing, da Familiar Labs, responde a cada uma abaixo.
6 PERGUNTASPARA GRAVADORASPARA ESTÚDIOS

De quem é a voz que canta o resultado?

O artista, de novo, em cada língua
UM EXEMPLO PÚBLICO
Lee Hyun gravou as seis línguas de “Masquerade”, do MIDNATT (2023).
Outro cantor, convertido para o timbre do artista
UM EXEMPLO PÚBLICO
Kevin Woo cantou o vocal em coreano de “Love U Like That”, de Lauv (2023); um novo vocal em espanhol virou a voz de Brenda Lee em “Rockin' Around the Christmas Tree” (2024).
Um vocal novo gerado
UM EXEMPLO PÚBLICO
Os geradores de música com IA que criam uma música a partir de um prompt.

O Song Dubbing leva a performance gravada do próprio artista, então o take que os fãs conhecem é o que eles ouvem. É a primeira dublagem de músicas de verdade: até agora, uma música só chegava a outra língua sendo cantada de novo (pelo próprio artista, por outro cantor ou por um novo vocal feito para isso); aqui nada é cantado de novo.

A letra mantém o sentido, a rima e as sílabas?

Tentamos o híndi duas vezes, mas a dicção e a métrica de como se canta em híndi simplesmente não combinavam com os ritmos ocidentais, e não conseguimos fazer funcionar.
Terry McBride, Nettwerk Music Group, sobre “Girlfriend”, de Avril Lavigne, CBC, 2007

“Girlfriend” saiu em outras sete línguas, mas não em híndi: um verso cantado tem um número fixo de notas. Peça para ver cada verso ao lado de uma tradução de volta, com as sílabas contadas contra as notas. Song Dubbing: nunca menos sílabas que o original, o esquema de rimas reproduzido, o sentido nunca muda para encaixar uma rima. O artigo sobre rima e sílabas vai verso a verso.

O que acontece com o vídeo, e quais masters são entregues?

O VIDEOCLIPE

Lábios na nova letra

Em até 4K.

A MIXAGEM

Estéreo pronto para lançamento

WAV PCM de 24 bits com 144 dB de faixa dinâmica.

O VOCAL

A faixa de voz separada

O Song Dubbing entrega os três. Uma versão só em áudio deixa os lábios se movendo com palavras que o ouvinte já não escuta, e uma prévia comprimida não pode ser masterizada.

Quem aprova a letra, e quais direitos ficam documentados?

Uma ferramenta que publica sem a aprovação do artista põe palavras na boca dele.

No “Hamilton” alemão, Lin-Manuel Miranda revisava a adaptação a cada três meses em três colunas: o inglês dele, o alemão e uma retrotradução. O Song Dubbing começa pelo consentimento do artista, enviado pela gravadora com o álbum, e o artista aprova cada verso antes de qualquer lançamento.
  • A composição. A lei de direitos autorais dos Estados Unidos lista a tradução como “obra derivada” (17 U.S.C. § 101): a editora e os compositores liberam a letra.
  • A gravação. A gravadora controla o master.
  • A voz. A Lei ELVIS (ELVIS Act) do Tennessee, sancionada em 21 de março de 2024, tornou a voz um direito da personalidade. Peça o consentimento por escrito do artista.
  • A aprovação. A Universal Music Group lançou a versão em espanhol de Brenda Lee com a aprovação dela. Pergunte quem aprovou cada verso, e quando.

As seis respostas, num lugar só

SONG DUBBING

Quem canta continua sendo quem canta.

O Song Dubbing canta em alemão, coreano, espanhol, francês, inglês, italiano, mandarim, português e russo para começar. Ouça uma música dublada ao lado do original ou leia o artigo sobre o Song Dubbing. É um serviço sob medida para gravadoras: escreva para a equipe com o álbum.

PERGUNTAS

Qual é a diferença entre dublagem de músicas e um cover com voz convertida?

Uma versão com voz convertida parte da nova performance de outro cantor e muda o timbre dela para soar como o artista. O Song Dubbing, da Familiar Labs, parte da gravação do próprio artista, então o fraseado, a respiração e a emoção são do artista.

Como confiro uma letra traduzida numa língua que não falo?

Peça três colunas por verso: o original, a nova letra e uma tradução de volta, com as sílabas contadas contra a melodia.

Uma tradução de música com IA precisa da autorização da editora?

Normalmente, sim. A lei de direitos autorais dos Estados Unidos lista a tradução como obra derivada, então a editora e os compositores liberam a letra. Confirme com a sua equipe jurídica para cada território.

REFERÊNCIAS

  1. [1]The Korea Times, a Hybe usa tecnologia de voz com IA no single multilíngue do MIDNATT, 15 de maio de 2023
  2. [2]NME, Lauv recorre à IA e a um ex-idol do K-pop para a versão coreana de “Love U Like That”, 2023
  3. [3]ABC News, “Rockin' Around the Christmas Tree”, de Brenda Lee, em espanhol, 25 de outubro de 2024
  4. [4]The Daily Utah Chronicle, “Girlfriend”, de Avril Lavigne, e as suas versões em outras línguas, 5 de abril de 2021
  5. [5]NPR, nesta montagem de “Hamilton”, tudo é feito em alemão, outubro de 2022
  6. [6]17 U.S.C. § 101, definições (Cornell Legal Information Institute)
  7. [7]Associated Press via News4JAX, o Tennessee é o primeiro estado a proteger músicos contra a IA, 21 de março de 2024
  8. [8]Song Dubbing: o artigo

TRADUÇÃO MULTIMODAL

A Familiar Labs faz dublagem uma geração à frente com um Modelo de Fundação para Localização Multimodal (MLFM), o primeiro modelo de fundação para tradução multimodal: um só modelo decide o que localizar em texto, áudio e imagem, e mostra para você as escolhas. Sua voz e seus lábios, levados para novas línguas. Uma equipe de 7, com doutores, investida por Samsung, RedBird e Gold House. Nossa missão