EIN LEITFADEN FÜR DEN EINKAUF

KI-Songübersetzung bewerten: 6 Fragen, die du stellen solltest

FAMILIAR LABS FORSCHUNGALLE ARTIKEL

ZUSAMMENFASSUNG

Stell jedem Tool für KI-Songübersetzung oder Song-Synchronisation sechs Fragen: Wessen Stimme singt; behält der Songtext Bedeutung, Reim und Silben; wer gibt ihn frei; was passiert mit dem Musikvideo; welche Master werden geliefert; welche Rechte sind dokumentiert. Song Dubbing von Familiar Labs beantwortet jede davon unten.
6 FRAGENFÜR LABELSFÜR STUDIOS

Wessen Stimme singt das Ergebnis?

Der Künstler, noch einmal, pro Sprache
EIN ÖFFENTLICHES BEISPIEL
Lee Hyun nahm alle sechs Sprachen von MIDNATTs „Masquerade“ auf (2023).
Ein anderer Sänger, in die Klangfarbe des Künstlers umgewandelt
EIN ÖFFENTLICHES BEISPIEL
Kevin Woo sang den koreanischen Gesang von Lauvs „Love U Like That“ (2023); ein neuer spanischer Gesang wurde bei „Rockin' Around the Christmas Tree“ zur Stimme von Brenda Lee (2024).
Ein neu generierter Gesang
EIN ÖFFENTLICHES BEISPIEL
Die KI-Musikgeneratoren, die aus einem Prompt einen Song machen.

Song Dubbing überträgt die eigene aufgenommene Performance des Künstlers, sodass die Aufnahme, die die Fans kennen, die ist, die sie hören. Es ist die erste echte Song-Synchronisation: Bisher kam ein Song nur in eine andere Sprache, wenn er neu eingesungen wurde (vom Künstler selbst, von jemand anderem oder als neu gemachter Gesang); hier wird nichts neu eingesungen.

Behält der Songtext Bedeutung, Reim und Silben?

Wir haben es zweimal mit Hindi versucht, aber die Diktion und das Metrum, wie man Hindi singt, passten einfach nicht zu den westlichen Rhythmen, und wir haben es einfach nicht hinbekommen.
Terry McBride, Nettwerk Music Group, über „Girlfriend“ von Avril Lavigne, CBC, 2007

„Girlfriend“ erschien in sieben weiteren Sprachen, aber nicht auf Hindi: Eine gesungene Zeile hat eine feste Zahl von Noten. Lass dir jede Zeile neben einer Rückübersetzung zeigen, die Silben gegen die Noten gezählt. Song Dubbing: nie weniger Silben als das Original, das Reimschema nachgebildet, die Bedeutung nie für einen Reim verbogen. Reim und Silben geht Zeile für Zeile durch.

Was passiert mit dem Video, und welche Master werden geliefert?

DAS MUSIKVIDEO

Lippen zum neuen Songtext

Bis zu 4K.

DER MIX

Release-fertiges Stereo

24-Bit-PCM-WAV, 144 dB Dynamikumfang.

DER GESANG

Die Gesangsspur allein

Song Dubbing liefert alle drei. Eine reine Audiofassung lässt die Lippen zu Worten weiterlaufen, die der Hörer nicht mehr hört, und eine komprimierte Vorschau lässt sich nicht mastern.

Wer gibt den Songtext frei, und welche Rechte sind dokumentiert?

Ein Tool, das ohne die Freigabe des Künstlers veröffentlicht, legt dem Künstler Worte in den Mund.

Lin-Manuel Miranda prüfte den deutschen „Hamilton“ alle drei Monate in drei Spalten: sein Englisch, das Deutsch und eine Rückübersetzung. Song Dubbing beginnt mit der Zustimmung des Künstlers, die das Label mit dem Album schickt, und der Künstler gibt jede Zeile vor dem Release frei.
  • Die Komposition. Nach US-Urheberrecht ist eine Übersetzung ein „derivative work“ (17 U.S.C. § 101), eine Bearbeitung: Musikverlag und Songwriter geben den Songtext frei.
  • Die Aufnahme. Das Label kontrolliert den Master.
  • Die Stimme. Der ELVIS Act aus Tennessee, unterzeichnet am 21. März 2024, machte die Stimme zum Persönlichkeitsrecht. Verlange die schriftliche Zustimmung des Künstlers.
  • Die Freigabe. Universal Music Group veröffentlichte die spanische Fassung von Brenda Lee mit ihrer Zustimmung. Frag, wer jede Zeile wann freigegeben hat.

Die sechs Antworten an einem Ort

SONG DUBBING

Der Sänger bleibt der Sänger.

Song Dubbing singt zum Start auf Deutsch, Englisch, Französisch, Italienisch, Koreanisch, Mandarin, Portugiesisch, Russisch und Spanisch. Hör einen synchronisierten Song neben seinem Original oder lies das Paper zu Song Dubbing. Es ist ein persönlich betreuter Full-Service für Plattenlabels: Schreib dem Team mit dem Album.

FRAGEN

Was ist der Unterschied zwischen Song-Synchronisation und einem Cover mit umgewandelter Stimme?

Eine Fassung mit umgewandelter Stimme geht von der neuen Performance eines anderen Sängers aus und ändert ihre Klangfarbe, damit sie wie der Künstler klingt. Song Dubbing von Familiar Labs geht von der eigenen Aufnahme des Künstlers aus, Phrasierung, Atem und Emotion gehören also dem Künstler.

Wie prüfe ich einen übersetzten Songtext in einer Sprache, die ich nicht spreche?

Verlange drei Spalten pro Zeile: das Original, den neuen Songtext und eine Rückübersetzung, die Silben gegen die Melodie gezählt.

Braucht eine KI-Songübersetzung die Erlaubnis des Musikverlags?

In der Regel ja. Das US-Urheberrecht führt eine Übersetzung als Bearbeitung (derivative work), also geben Musikverlag und Songwriter den Songtext frei. Kläre das für jedes Territorium mit deiner Rechtsabteilung.

QUELLEN

  1. [1]The Korea Times, Hybe uses AI voice technology for Midnatt's multilingual single, 15. Mai 2023
  2. [2]NME, Lauv taps AI and a former K-pop idol to create Korean version of 'Love U Like That', 2023
  3. [3]ABC News, „Rockin' Around the Christmas Tree“ von Brenda Lee auf Spanisch, 25. Oktober 2024
  4. [4]The Daily Utah Chronicle, „Girlfriend“ von Avril Lavigne und seine fremdsprachigen Versionen, 5. April 2021
  5. [5]NPR, In this production of 'Hamilton,' everything is done in German, Oktober 2022
  6. [6]17 U.S.C. § 101, Begriffsbestimmungen (Cornell Legal Information Institute)
  7. [7]Associated Press über News4JAX, Tennessee schützt als erster Bundesstaat Musiker vor KI, 21. März 2024
  8. [8]Song Dubbing: das Paper

Multimodale Übersetzung

Familiar Labs entwickelt Synchronisation einer neuen Generation, mit einem multimodalen Foundation Model für die Lokalisierung (MLFM), dem ersten Foundation Model für multimodale Übersetzung: Ein Modell entscheidet, was über Text, Ton und Bild hinweg lokalisiert wird, und zeigt Ihnen die Optionen. Ihre Stimme und Ihre Lippen, übertragen in neue Sprachen. Ein Team von 7 mit PhDs, unterstützt von Samsung, RedBird und Gold House. Unsere Mission