ТЛУМАЧЭННЕ

Пераклад не з'яўляецца генерацыяй

FAMILIAR · ДАСЛЕДАВАННІАБНОЎЛЕНА УСЕ АРТЫКУЛЫ

АНАТАЦЫЯ

Не «генератыўны ШІ», а пераклад на службе творцаў. Генераваць і перакладаць: два розныя дзеясловы. Генераваць значыць узяць промпт і зрабіць тое, чаго не было. Перакладаць значыць узяць тое, што ўжо існуе, выкананне, і перанесці яго ў іншую мову. Familiar з'яўляецца новай парадыгмай, першай у сваім родзе: мультымадальная мадэль прыняцця рашэнняў у лакалізацыі (MLDM), першая фундаментальная мадэль для мультымадальнага перакладу. Акцёр, таймінг і сцэна застаюцца; словы, рот і галасавая дарожка мяняюцца пад новую мову.
ПЕРШАЯ ФУНДАМЕНТАЛЬНАЯ МАДЭЛЬ ДЛЯ МУЛЬТЫМАДАЛЬНАГА ПЕРАКЛАДУ

Два дзеясловы

Генератыўны ШІ добра падыходзіць для стварэння новага: на ўваходзе промпт, на выхадзе новы кантэнт, і ўвесь сэнс у тым, што вынік новы. У перакладу мэта адваротная.

ПеракладІНШЫ ДЗЕЯСЛОЎ

На ўваходзе выкананне, а на выхадзе тое самае выкананне на іншай мове.

ГЕНЕРАВАЦЬ

  • На ўваходзе: промпт
  • На выхадзе: новы кантэнт
  • Мерка: наколькі новы і добры вынік

ПЕРАКЛАДАЦЬ

  • На ўваходзе: гатовае выкананне
  • На выхадзе: тое самае выкананне на іншай мове
  • Мерка: наколькі верным ён застаецца арыгіналу

Любога перакладчыка, чалавека ці машыну, ацэньваюць па тым, наколькі мала ён выдумляе.

Што застаецца, што мяняецца

Акцёр
МЯНЯЕЦЦАСловы
Твар
МЯНЯЕЦЦАРухі вуснаў
Таймінг
МЯНЯЕЦЦАГаласавая дарожка, на новай мове
Гук сцэны: смех, музыка, атмасфера
МЯНЯЕЦЦА

Голас на новай мове належыць самому акцёру і бярэцца з самога кліпа. Імёны і фірмовыя фразы застаюцца роўна такімі, як сказаныя, праз спіс «Не перакладаць»; жарты перапісваюцца так, каб спрацаваць на мэтавай мове.

Чаму ліпсінк з'яўляецца часткай перакладу

Людзі чуюць маўленне не толькі вушамі. Пры эфекце Мак-Гурка голас, які вымаўляе [b], накладзены на твар, які вымаўляе [g], звычайна чуецца як [d], гук, якога не было ні ў адным з каналаў (Tiippana, 2014, апісанне працы McGurk і MacDonald, 1976). Мозг злучае ўбачанае і пачутае ў адно цэлае.
ГОЛАС [b] + ТВАР [g] = ЧУЕЦЦА [d]

Дубляж толькі голасу пакідае гэтую разбежнасць у кожным кадры: рот гаворыць на адной мове, а гукавая дарожка на іншай, і разумець становіцца цяжэй. Таму рот з'яўляецца часткай паведамлення. Перакласці выкананне азначае перакласці губы разам са словамі, і таму ў дубляжы Familiar губы рухаюцца пад новыя словы (FAQ, «Чаму ліпсінк важны?»).

Крэатыўныя дырэктары правяраюць перад выхадам

Некаторыя рэплікі можна перадаць па-рознаму: жарт, шпільку, фразу, якая гучыць шчыра ці суха. Такія рэплікі вяртаюцца ў трох варыянтах перакладу з розным намерам і эмоцыяй; гэтак жа і слэнг, які застаецца такім, як сказаны, і ненарматыўная лексіка, якой меней у версіі для маладзейшых гледачоў. Каманда выбірае адзін варыянт, правіць любую рэпліку побач з арыгіналам і толькі тады запускае рэндэр.

MLDM бярэ на сябе руціну.

Руціна дубляжу ў тым, каб вырашаць, які голас і як рухаюцца губы, для кожнай рэплікі на кожнай мове. MLDM гэта вырашае і фіксуе кожнае рашэнне разам з заданнем, каб ваша каманда магла змяніць любое з іх. У распрацоўцы: выбар таго, якія гукі застаюцца на мове арыгінала, скандаванне ці выкрык, і які твар ці тэкст у кадры перакладаць. Выбар, ад якога залежыць добры дубляж (які жарт спрацуе, які тон пасуе, якое імя застаецца), застаецца ў людзей, якія стварылі твор.

++
Усе даныя, на якіх мы навучалі мадэль, стварыла сама каманда Familiar.

Мы проста яшчэ адзін інструмент творчага працэсу.

ПЫТАННІ

Ці з'яўляецца Familiar генератыўным ШІ?

Не. Familiar з'яўляецца мультымадальнай мадэллю прыняцця рашэнняў у лакалізацыі (MLDM): ён вырашае, як лакалізаваць тое, што ўжо ёсць, без промпту. Вы даяце сваё відэа, і тое самае выкананне вяртаецца на іншай мове. Усе даныя, на якіх мы навучалі мадэль, стварыла сама каманда Familiar. Мы проста яшчэ адзін інструмент творчага працэсу.

Што будзе з маёй музыкай і гукавымі эфектамі?

Яны застаюцца. Смех, музыка і бас, гукавыя эфекты і атмасфера захоўваюцца пад новымі дыялогамі.

Ці магу я выправіць пераклад?

Так. Кожнае відэа спыняецца на экране праверкі, дзе вы правіце любую рэпліку побач з арыгіналам да рэндэру.

КРЫНІЦЫ

  1. [1]Tiippana, K. (2014). What is the McGurk effect? Frontiers in Psychology 5:725, прачытана 24 кастрычніка 2026
  2. [2]FAQ Familiar: Чаму ліпсінк важны?
  3. [3]ШІ-ліпсінк: што гэта, што ён прапускае і што яго перасягае
  4. [4]Чаму Familiar не з'яўляецца генератыўным ШІ ў традыцыйным сэнсе
  5. [5]Яшчэ адзін інструмент творчага працэсу

Мультымадальны пераклад

Familiar Labs робіць дубляж новага пакалення з дапамогай мультымадальнай мадэлі прыняцця рашэнняў у лакалізацыі (MLDM), першай фундаментальнай мадэлі для мультымадальнага перакладу: адна мадэль вырашае, што лакалізаваць у тэксце, гуку і карцінцы, і выносіць варыянты на ваш выбар. Ваш голас і губы, перанесеныя ў новыя мовы. Гэта каманда з 8 чалавек з PhD, якую падтрымліваюць Samsung, RedBird і Gold House. Наша місія