SAMENVATTING
Twee begrippen, helder uitgelegd
Machine learningHET BREDE VAKGEBIED
GENERATIEVE AI
- Generatieve AI is één toepassing van machine learning. IBM definieert het als kunstmatige intelligentie die originele content kan maken, zoals tekst, afbeeldingen, video, audio of softwarecode, als antwoord op een prompt of verzoek van een gebruiker.
- Het is een prima tool om nieuwe dingen te maken: een conceptbeeld, een eerste opzet, een schets voor een liedje.
VERTALEN MET FAMILIAR
- Vertalen vraagt iets anders.
- Het werk bestaat al, en Familiar brengt het ongeschonden naar een andere taal met een nieuw paradigma, het eerste in zijn soort: een multimodaal beslismodel voor lokalisatie (MLDM), het eerste foundation model voor multimodale vertaling.
| Generatieve AI | Vertalen met Familiar | |
|---|---|---|
| Input | Een prompt | Uw afgeronde video |
| Wat is nieuw | De content zelf | De woorden in een andere taal, en de stem en de mond die ze dragen |
| Wiens gelijkenis | Wie de prompt ook beschrijft | De acteur in beeld, met toestemming |
| Review | Verschilt per tool | Uw creative directors, zin voor zin, vóór de render |
| Output | Nieuwe tekst, afbeeldingen, video, audio of code | Dezelfde performance, tot 4K, in echte 5.1 of stereo |
Zes vragen voor elke leverancier
One shot today means giving up the rest.
54.7%
FEWER TRANSLATION ERRORS · FAMILIAR VS ELEVENLABS DUBBING V2
270%
ELEVENLABS MORE BACKGROUND-SOUND ERROR · THE LAUGHTER, THE MUSIC, THE AMBIENCE
+27.8%
FAMILIAR CLOSER TO THE REAL SPEAKER
Wie kijkt alles na voor de release?
Uw creative directors. Een zin die meer dan één kant op kan, een grap of een steek onder water, komt terug als drie vertalingen met een andere bedoeling en emotie; zij kiezen er één, bewerken elke zin naast het origineel en starten pas daarna de dub. Een Niet-vertalen-lijst houdt namen en catchphrases precies zoals ze gezegd zijn.
Welke bestanden komen er terug?
Elke taal komt binnen als afgeronde video tot 4K, met de volledige mix in echte 5.1-surround of stereo, naar keuze, in 24-bits PCM-WAV. Daarnaast: ondertitels in .srt en .vtt uit het nagekeken transcript, opgemaakt volgens de conventies van de Timed Text Style Guide van Netflix, de vertaalde titel en beschrijving, en het stemspoor apart voor uw eigen mix.
MLDM voor het monnikenwerk.
Het monnikenwerk van nasynchronisatie is elke zin in elke taal: welke vertaling, welke stem, hoe de lippen volgen. De route naar hoge kwaliteit doet dat vandaag met de hand: een ondersteunende tool, een team van VFX-artiesten en weken per project, en elke taal is een nieuw project. De tools die nu alles in één keer doen, slaan het over en leveren de rest in: de vertaling is niet te bewerken, de muziek en de ruimteklank vallen weg, en de lippen haperen bij een hand voor het gezicht, een microfoon of een zijaanzicht. Familiar doet het in één keer, en met de kwaliteit. Het MLDM beslist over dat deel en legt elke beslissing vast bij de opdracht, waar uw team die kan aanpassen. Vandaag gaat dat over de vertaalkeuzes: de grap, de straattaal zoals die gezegd is, minder grof taalgebruik voor een jongere versie. Kiezen welke geluiden in de oorspronkelijke taal blijven, welk gezicht er spreekt en welke tekst in beeld er vertaald wordt, is in de maak. Casting, performance en elke creatieve keuze blijven bij de mensen die het werk maakten.
Wij zijn een extra tool in het creatieve proces.
VRAGEN
Is Familiar generatieve AI?
Nee. Familiar is een multimodaal beslismodel voor lokalisatie (MLDM): het beslist hoe je lokaliseert wat er al is, zonder prompt. Uw video gaat erin, dezelfde performance komt eruit in een andere taal.
Kan ons creatieve team een zin aanpassen voordat er gerenderd wordt?
Ja. Elke vertaalde zin wacht op uw creative directors, die hem naast het origineel kunnen bewerken of uit drie vertalingen kunnen kiezen waar een zin meer dan één kant op kan. Pas daarna wordt de dub gerenderd.
Welke talen ondersteunt Familiar?
De dubs komen eruit in 30 talen, elke naar elke. Beeldmateriaal aanleveren kan in 99 brontalen.
BRONNEN
Multimodale vertaling
Familiar Labs zet met een multimodaal beslismodel voor lokalisatie (MLDM) een generatiesprong in nasynchronisatie. Het eerste foundation model voor multimodale vertaling: één model beslist wat er gelokaliseerd wordt in tekst, audio en beeld, en laat je de keuzes zien. Jouw stem en lippen, meegenomen naar nieuwe talen. Een team van 8 met PhD's, gesteund door Samsung, RedBird en Gold House. Onze missie
