PAAIŠKINIMAS

Vertimas nėra generavimas

FAMILIAR TYRIMAIATNAUJINTA VISI STRAIPSNIAI

SANTRAUKA

Ne „generatyvinis DI“, o vertimas, įgalinantis kūrėjus. Generuoti ir versti – skirtingi veiksmažodžiai. Generuojant pagal užklausą sukuriama tai, ko nebuvo. Verčiant imama tai, kas jau yra, – atlikimas – ir perkeliama į kitą kalbą. „Familiar“ – tai nauja paradigma, pirmoji tokio pobūdžio: multimodalinis lokalizavimo sprendimų modelis (MLDM), pirmasis pamatinis multimodalinio vertimo modelis. Aktorius, laikas ir scena lieka; žodžiai, burna ir balso takelis pasikeičia, kad derėtų prie naujos kalbos.
PIRMASIS PAMATINIS MULTIMODALINIO VERTIMO MODELIS

Du veiksmažodžiai

Generatyvinis DI puikiai tinka naujiems dalykams kurti: įvedama užklausa, gaunamas naujas turinys, ir visa esmė ta, kad rezultatas naujas. Vertimo tikslas priešingas.

VertimasKITAS VEIKSMAŽODIS

Įvedamas atlikimas, o grąžinamas tas pats atlikimas kita kalba.

GENERUOTI

  • Įvestis: užklausa
  • Rezultatas: naujas turinys
  • Matas: kiek rezultatas naujas ir geras

VERSTI

  • Įvestis: baigtas atlikimas
  • Rezultatas: tas pats atlikimas kita kalba
  • Matas: kiek ištikimai išlaikomas originalas

Kiekvienas vertėjas, žmogus ar mašina, vertinamas pagal tai, kiek mažai jis išgalvoja.

Kas lieka, kas pasikeičia

Aktorius
PASIKEIČIAŽodžiai
Veidas
PASIKEIČIABurnos judesiai
Laikas
PASIKEIČIABalso takelis, nauja kalba
Scenos garsas: juokas, muzika, aplinkos garsai
PASIKEIČIA

Balsas naujoje kalboje yra paties aktoriaus, paimtas iš paties klipo. Vardai ir firminės frazės, įtraukti į sąrašą „Neversti“, lieka lygiai tokie, kaip ištarti; juokeliai perrašomi taip, kad suveiktų tiksline kalba.

Kodėl lūpų sinchronizavimas yra vertimo dalis

Kalbą žmonės girdi ne vien ausimis. Pasireiškiant McGurko efektui, balsas, tariantis [b], uždėtas ant veido, tariančio [g], dažniausiai girdimas kaip [d] – garsas, kurio neperteikė nė vienas kanalas (Tiippana, 2014, aprašant McGurko ir MacDonaldo 1976 m. tyrimą). Smegenys sulieja tai, ką mato, su tuo, ką girdi.
BALSAS [b] + VEIDAS [g] = GIRDIMA [d]

Dubliažas tik balsu tą nesutapimą palieka kiekviename kadre: burna kalba viena kalba, garso takelis kita, todėl suprasti tampa sunkiau. Todėl burna yra žinios dalis. Versti atlikimą reiškia versti lūpas kartu su žodžiais, todėl „Familiar“ dubliaže lūpos juda pagal naujus žodžius (DUK, „Kodėl svarbus lūpų sinchronizavimas?“).

Kūrybos direktoriai peržiūri prieš išleidžiant

Kai kurias replikas galima perteikti ne vienu būdu: juokelį, dygų pastebėjimą, eilutę, kuri gali skambėti nuoširdžiai arba sausai. Tokios grąžinamos trimis vertimo variantais su skirtingu ketinimu ir emocija; taip pat ir slengas, paliktas taip, kaip pasakytas, ir keiksmažodžiai, sušvelninti jaunesnei auditorijai skirtai versijai. Komanda išsirenka vieną, bet kurią eilutę redaguoja pagal originalą ir tik tada paleidžia dubliavimą.

MLDM – monotoniškam darbui.

Monotoniška dubliavimo dalis – spręsti, kuris balsas ir kaip seka lūpos, kiekvienai replikai kiekviena kalba. Tai sprendžia MLDM ir kiekvieną sprendimą įrašo kartu su projektu, kad jūsų komanda galėtų bet kurį iš jų pakeisti. Jau kuriama: pasirinkimas, kurie garsai lieka originalo kalba, ar tai būtų skanduotė, ar riksmas, ir kurį veidą ar tekstą ekrane versti. Sprendimai, nuo kurių priklauso dubliažo kokybė – kuris juokelis suveiks, kuris tonas tinka, kuris vardas lieka, – lieka žmonėms, kurie sukūrė kūrinį.

++
Visus duomenis, kuriais mokėme modelį, iš tikrųjų sukūrė pati „Familiar“ komanda.

Esame dar vienas įrankis kūrybos procese.

KLAUSIMAI

Ar „Familiar“ yra generatyvinis DI?

Ne. „Familiar“ – tai multimodalinis lokalizavimo sprendimų modelis (MLDM): jis sprendžia, kaip lokalizuoti tai, kas jau yra, be jokios užklausos. Įkeliate vaizdo įrašą, ir tas pats atlikimas grįžta kita kalba. Visus duomenis, kuriais mokėme modelį, iš tikrųjų sukūrė pati „Familiar“ komanda. Esame dar vienas įrankis kūrybos procese.

Kas nutinka mano muzikai ir garso efektams?

Jie lieka. Juokas, muzika ir bosai, garso efektai ir aplinkos garsai išlieka po nauju dialogu.

Ar galiu pataisyti vertimą?

Taip. Kiekvienas vaizdo įrašas sustoja peržiūros ekrane, kuriame prieš dubliavimą bet kurią eilutę galite redaguoti pagal originalą.

ŠALTINIAI

  1. [1]Tiippana, K. (2014). What is the McGurk effect? Frontiers in Psychology 5:725, skaityta 2026 m. spalio 24 d.
  2. [2]„Familiar“ DUK: Kodėl svarbus lūpų sinchronizavimas?
  3. [3]DI lūpų sinchronizavimas: kas tai, ko jam trūksta, kas jį pranoksta
  4. [4]Kodėl „Familiar“ nėra tradicinis generatyvinis DI
  5. [5]Dar vienas įrankis kūrybos procese

Multimodalinis vertimas

„Familiar Labs“ kuria naujos kartos dubliažą, pasitelkdama multimodalinį lokalizavimo sprendimų modelį (MLDM), pirmąjį pamatinį multimodalinio vertimo modelį: vienas modelis sprendžia, ką lokalizuoti tekste, garse ir vaizde, ir parodo jums pasirinkimus. Jūsų balsas ir lūpos, perkelti į naujas kalbas. Tai 8 žmonių komanda su mokslų daktarais, kurią remia „Samsung“, „RedBird“ ir „Gold House“. Mūsų misija