ABSTRAKT
Dva pojmy, jednoducho
Strojové učenieŠIROKÁ OBLASŤ
GENERATÍVNA AI
- Generatívna AI je jedno z využití strojového učenia. IBM ju definuje ako umelú inteligenciu, ktorá dokáže na základe promptu alebo požiadavky používateľa vytvárať pôvodný obsah, napríklad text, obrázky, video, zvuk či softvérový kód.
- Je to dobrý nástroj na tvorbu nových vecí: koncepčný záber, prvý koncept, náčrt piesne.
PREKLAD S FAMILIAR
- Preklad si žiada niečo iné.
- Dielo už existuje a Familiar ho prenesie do iného jazyka nedotknuté vďaka novej paradigme, prvému modelu svojho druhu: multimodálnemu rozhodovaciemu modelu pre lokalizáciu (MLDM), prvému základnému modelu pre multimodálny preklad.
| Generatívna AI | Preklad s Familiar | |
|---|---|---|
| Vstup | Prompt | Vaše hotové video |
| Čo je nové | Samotný obsah | Slová v inom jazyku a hlas a ústa, ktoré ich nesú |
| Čia podoba | Ktokoľvek, koho prompt opíše | Herec na obrazovke, so súhlasom |
| Kontrola | Podľa nástroja | Vaši kreatívni riaditelia, replika po replike, pred renderovaním |
| Výstup | Nový text, obrázky, video, zvuk alebo kód | Ten istý prejav, až do 4K, so skutočným mixom 5.1 alebo v stereu |
Šesť otázok pre každého dodávateľa
One shot today means giving up the rest.
54.7%
FEWER TRANSLATION ERRORS · FAMILIAR VS ELEVENLABS DUBBING V2
270%
ELEVENLABS MORE BACKGROUND-SOUND ERROR · THE LAUGHTER, THE MUSIC, THE AMBIENCE
+27.8%
FAMILIAR CLOSER TO THE REAL SPEAKER
Kto to pred vydaním kontroluje?
Vaši kreatívni riaditelia. Replika, ktorá môže vyznieť viacerými spôsobmi, napríklad vtip alebo rýpnutie, sa vráti v troch prekladoch s rôznym zámerom a emóciou; oni jeden vyberú, upravia ktorúkoľvek repliku podľa originálu a až potom spustia dabing. Zoznam Neprekladať zachová mená a hlášky presne tak, ako zazneli.
Aké súbory dostanete?
Každý jazyk príde ako hotové video až do 4K s plným mixom ako skutočný priestorový zvuk 5.1 alebo stereo, podľa vášho výberu, v 24-bitovom PCM WAV. K nemu titulky vo formátoch .srt a .vtt zo skontrolovaného prepisu, podľa konvencií Timed Text Style Guide od Netflixu, preložený názov a popis a samotná hlasová stopa pre váš vlastný mix.
MLDM na mravčiu prácu.
Mravčou prácou dabingu je každá replika v každom jazyku: ktoré znenie, ktorý hlas, ako pery nasledujú slová. Cesta k vysokej kvalite dnes túto časť robí ručne: asistenčný nástroj, tím VFX umelcov a týždne práce na projekt, pričom každý jazyk je nový projekt. Dnešné nástroje na jeden krok ju preskočia a obetujú všetko ostatné: preklad sa nedá upraviť, hudba a atmosféra priestoru zmiznú a pery zlyhajú pri ruke pred tvárou, mikrofóne či pohľade z boku. Familiar je jeden krok aj kvalita. MLDM o tejto časti rozhoduje a každé rozhodnutie zaznamená k úlohe, kde ho váš tím môže zmeniť. Dnes to pokrýva rozhodnutia o preklade: vtip, slang ponechaný tak, ako zaznel, vulgarizmy stlmené vo verzii pre mladších divákov. Na výbere toho, ktoré zvuky zostanú v pôvodnom jazyku, ktorá tvár hovorí a ktorý text na obrazovke preložiť, pracujeme. Obsadenie, prejav aj každé tvorivé rozhodnutie zostávajú ľuďom, ktorí dielo vytvorili.
Sme ďalší nástroj v tvorivom procese.
OTÁZKY
Je Familiar generatívna AI?
Nie. Familiar je multimodálny rozhodovací model pre lokalizáciu (MLDM): rozhoduje, ako lokalizovať to, čo už existuje, bez akéhokoľvek promptu. Vložíte svoje video a ten istý prejav z neho vyjde v inom jazyku.
Môže náš tvorivý tím zmeniť repliku pred renderovaním?
Áno. Každá preložená replika čaká na vašich kreatívnych riaditeľov, ktorí ju môžu upraviť podľa originálu alebo vybrať z troch prekladov tam, kde sa replika dá čítať viacerými spôsobmi. Dabing sa vyrenderuje až potom.
Ktoré jazyky Familiar pokrýva?
Dabing vychádza v 30 jazykoch, z akéhokoľvek do akéhokoľvek. Zábery môžu prísť v ktoromkoľvek z 99 zdrojových jazykov.
ZDROJE
MULTIMODÁLNY PREKLAD
Familiar Labs prináša o generáciu lepší dabing vďaka multimodálnemu rozhodovaciemu modelu pre lokalizáciu (MLDM), prvému základnému modelu pre multimodálny preklad: jeden model rozhoduje, čo lokalizovať v texte, zvuku aj obraze, a ukáže vám možnosti. Váš hlas a vaše pery, prenesené do nových jazykov. Tím 8 ľudí s PhD, s podporou Samsungu, RedBird a Gold House. Naša misia
