DEFINÍCIA

Čo je multimodálny základný model pre lokalizáciu (MLFM)?

FAMILIAR LABS VÝSKUMAKTUALIZOVANÉ VŠETKY ČLÁNKY
ČÍTAŤ V JAZYKUEnglishEspañolPortuguês中文日本語한국어FrançaisDeutschالعربيةBahasa IndonesiaРусскийItalianoTiếng ViệtไทยNederlandsΕλληνικάУкраїнськаHrvatskiLietuviųSlovenčinaSvenskaБългарскиDanskLatviešu

ABSTRAKT

Prvý základný model pre multimodálny preklad, nová paradigma, prvý model svojho druhu. MLFM je jeden model, ktorý rozhoduje, čo lokalizovať a ako, v texte, zvuku aj obraze, a ukáže vám možnosti, na ktorých záleží. Najprv preklad, potom celý dabing v jednom kroku: hlas, pery aj scéna naraz. Rozhodnutia k sebe sedia, pretože ich robí jeden model. Človek sa nikdy nezmení.
PRVÝ ZÁKLADNÝ MODEL PRE MULTIMODÁLNY PREKLADAUDIOVIZUÁLNY PREKLAD NARAZ, NIE KASKÁDOVO

O čom MLFM rozhoduje?

TEXT
Ktoré znenie prenesie repliku do nového jazyka. MLFM zváži niekoľko znení a vyberie najlepšie: vo vtipe, v príbehu či v replike rozhovoru jedno slovo zmení zámer aj emóciu. Tie isté rozhodnutia pokrývajú pojmy, čo neprekladať, slang ponechaný tak, ako zaznel, ponechané meno aj značku, narážku nahradenú takou, ktorú publikum pozná, to, čomu sa daná kultúra vyhýba, a vulgarizmy stlmené pre mladšiu verziu.
ZVUK
Čo vôbec prekladať. MLFM počuje všetko, čo je v stope: smiech, dav, výkrik, rečníka v pozadí, ktorému nikto nerozumie. Nájde hlavný hlas, prenesie ho do nového jazyka vlastným hlasom hovoriaceho a zvyšok nechá tak, ako bol.
OBRAZ
Kto to naozaj hovorí. O zvuku a obraze sa rozhoduje spoločne, takže MLFM vie, kto rozpráva, kto hovorí mimo záberu a čie pery sa majú hýbať. Pery nasledujú nové slová v každej replike, vrátane oklúzií a priestorového uvažovania; mimika a gestá nasledujú vtedy, keď si to vyžaduje dôraz alebo kultúra.

MOŽNOSTI, KTORÉ VIDÍTE

TEXT
DNESKde sa dá replika vyznieť viacerými spôsobmi, vaši kreatívni riaditelia dostanú znenia aj s odôvodnením každého z nich a jedno vyberú. Podcast, epizóda či film môže takých úsekov obsahovať veľa.
PRIPRAVUJEME
ZVUK
DNES
PRIPRAVUJEMEVýber toho, čo zostane v pôvodnom jazyku. Skandovanie, pokrik či fráza môžu zostať tak, ako zazneli, keď to tak chcete.
OBRAZ
DNES
PRIPRAVUJEMEVýber inej tváre, keď model určil nesprávneho hovoriaceho, a výber textu v zábere, ktorý sa má preložiť. Ten text, displej telefónu, obálka knihy, pouličná tabuľa či výklad obchodu, bude napísaný v pojmoch, ktoré ste si už zvolili; model priebežne rozhodne, čo zostane tak, ako bolo natočené, značka, meno, slang: balíček Tostitos zostane Tostitos.

Prečo jeden model?

REŤAZ NÁSTROJOV

  • Prevod reči na text, potom preklad, potom hlas, potom synchronizácia pier, každá fáza ladená zvlášť.
  • Táto reťaz umožnila strojový dabing.
  • Každá fáza však stále háda bez ostatných, takže chyby sa z fázy na fázu sčítavajú.

JEDEN ZÁKLADNÝ MODEL, PRVÝ SVOJHO DRUHU

  • MLFM robí rozhodnutia spoločne.
  • Preklad pozná ústa, do ktorých sa musí zmestiť.
  • Hlas pozná scénu, v ktorej znie.
  • Človek sa nikdy nezmení.
++
Najprv preklad, potom dabing v jednom kroku: hlas, pery aj scéna vyjdú naraz, z tých istých rozhodnutí.

Audiovizuálny preklad naraz, nie kaskádovo: prvý svojho druhu. Práve preto je MLFM prvý základný model pre multimodálny preklad: jeden model, ktorý prenesie slová, hlas, pery aj scénu do nového jazyka naraz. Cesta kvality je dnes asistenčná: tím VFX umelcov a týždne práce na projekt, pričom každý jazyk je nový projekt. Dnešné nástroje na jeden krok sú rýchle a obetujú všetko ostatné. Familiar Labs je jeden krok aj kvalita.

HeyGenHeyGenElevenLabsElevenLabsHeyGen + ElevenLabsONE-SHOT TOOLS · NO CONTROL

One shot today means giving up the rest.

The one-shot tools today give up the rest: the translation cannot be edited, the music and the room drop out, the voice drifts, and the lips fail on a hand over the face, a microphone, blur, bokeh, a side view or several people in frame. No spatial reasoning, no understanding of the world, no control. ElevenLabs' current Dubbing v2 edits only through an Enterprise API, and its full editor is the older model, in maintenance mode; HeyGen stitches a lip-sync over a dub like that, and the lip-sync breaks on the ordinary shots of any episode. Familiar Labs is one shot and the quality: translation first, reviewed; then the voice, the lips and the scene together, through the hard shots.

54.7%

FEWER TRANSLATION ERRORS · FAMILIAR LABS VS ELEVENLABS DUBBING V2

270%

ELEVENLABS MORE BACKGROUND-SOUND ERROR · THE LAUGHTER, THE MUSIC, THE AMBIENCE

+27.8%

FAMILIAR LABS CLOSER TO THE REAL SPEAKER

FAMILIAR LABS · ONE SHOT AND THE QUALITYFamiliar Labs vs Flawless TrueSync The ElevenLabs study The demos

Aký je rozdiel medzi lokalizáciou a prekladom?

Preklad sú slová. Lokalizácia je to, čo z nich potrebuje daná kultúra.

Správne pojmy, slang, mená ponechané tak, ako zazneli, narážka nahradená takou, ktorú publikum pozná, to, čomu sa daná kultúra vyhýba, primeraná miera vulgarizmov. O tom všetkom rozhoduje MLFM a časom aj o obraze, keď sa bude musieť zmeniť.

Je MLFM generatívna AI?

Nie. IBM ju definuje takto:

Generatívna AI, niekedy nazývaná gen AI, je umelá inteligencia (AI), ktorá dokáže na základe promptu alebo požiadavky používateľa vytvárať pôvodný obsah, napríklad text, obrázky, video, zvuk či softvérový kód.
IBM, What is generative AI?

Je to silný nástroj na tvorbu nových vecí. MLFM nemá žiadny prompt a nič nové sa nevymýšľa: rozhoduje, ako lokalizovať to, čo už existuje. Celý postoj nájdete v článkoch Prečo Familiar Labs nie je tradičná generatívna AI a Preklad nie je generovanie.

Komu patria tie rozhodnutia?

Vám. Každé rozhodnutie, ktoré MLFM urobí, sa zaznamená k dabingu, v zázname rozhodnutí.

  1. DNES

    Vaši kreatívni riaditelia kontrolujú rozhodnutia o preklade.

    Znenia s odôvodnením každého z nich; jedno vyberú skôr, než čokoľvek odíde.
  2. DNES

    Zoznam Neprekladať a kontext v jednej vete idú spolu s úlohou.

  3. PRIPRAVUJEME

    Rozhodnutia o zvuku a obraze na tej istej kontrole.

  4. PRIPRAVUJEME

    Pamäť rozhodnutí.

    Zmena zapamätaná pre tvorcu sa pri ďalšom dabingu uplatní ako prvá, takže čo raz zvolíte, prejde aj do ďalšej epizódy.

Celý príbeh je v článku Záznam rozhodnutí: ako kreatívni riaditelia vedú MLFM; plánované API v dokumentácii k rozhodnutiam.

OTÁZKY

Čo znamená skratka MLFM?

MLFM znamená Multimodal Localization Foundation Model, po slovensky multimodálny základný model pre lokalizáciu, nová paradigma, prvý model svojho druhu: jeden model, ktorý rozhoduje, čo lokalizovať a ako, v texte, zvuku aj obraze. Vyberá znenie repliky, čo preložiť vo zvuku, kto na obrazovke hovorí a ako pery, mimika a gestá nasledujú.

Je MLFM videomodel?

Nie v bežnom zmysle. MLFM pracuje so zábermi, ktoré už existujú, a rozhoduje, ako ich lokalizovať: slová, hlas, pery a mimiku. Človek na obrazovke zostáva presne taký, aký je, v každom jazyku.

ZDROJE

  1. [1]IBM, What is generative AI?, prečítané 27. októbra 2026
  2. [2]Naša misia
  3. [3]Časté otázky o Familiar Labs

MULTIMODÁLNY PREKLAD

Familiar Labs prináša o generáciu lepší dabing vďaka multimodálnemu základnému modelu pre lokalizáciu (MLFM), prvému základnému modelu pre multimodálny preklad: jeden model rozhoduje, čo lokalizovať v texte, zvuku aj obraze, a ukáže vám možnosti. Váš hlas a vaše pery, prenesené do nových jazykov. Tím 7 ľudí s PhD, s podporou Samsungu, RedBird a Gold House. Naša misia

Pozrieť celý benchmark →Ozvite sa tímu