ИЗСЛЕДОВАТЕЛСКА БЕЛЕЖКА

Какво има значение при превода на видео

FAMILIAR ИЗСЛЕДВАНИЯОБНОВЕНО ВСИЧКИ СТАТИИ

РЕЗЮМЕ

Четири неща решават дали един дублаж издържа: преводът звучи като писан на целевия език, звукът все още звучи като говорещия, текстът на екрана е пренесен и устните съвпадат. Първите две определят всичко останало. И четирите се оказват един и същ проблем: същото изпълнение, на друг език.

Четирите проблема

Попитайте какво прави един дублиран видеоклип добър и ще получите дълъг списък. Той се свежда до четири точки:

ЕСТЕСТВЕН ПРЕВОД
КАКВО ОЗНАЧАВА „ДОБРЕ“Нов сценарий на целевия език, който предава добре видеото; не съпоставяне изречение по изречение.
ЕСТЕСТВЕН ЗВУК
КАКВО ОЗНАЧАВА „ДОБРЕ“Същият човек, същата емоция, същият акцент, на новия език.
ТЕКСТ НА ЕКРАНА
КАКВО ОЗНАЧАВА „ДОБРЕ“Адаптиран към езика и към момента, в който се появява, без да поврежда видеото.
ЛИПСИНК
КАКВО ОЗНАЧАВА „ДОБРЕ“Невидим. Зрителят така и не забелязва, че го е имало.

Ако първите две се провалят, нищо след тях няма значение: едно грешно преведено изречение или явно чужд глас сами по себе си провалят дублажа. Последните две решават дали резултатът се усеща като оригинала или като дублаж.

Естествен превод: нов сценарий, а не съпоставяне

Всеки език изразява нещата посвоему: думите, идиомите, строежа на изречението, формите на обръщение, това какво изобщо се казва. Помолете модел да „преведе“ и той съпоставя изреченията едно към едно от език A към език B. Хората правят същото: щом се видят в ролята на преводач, задачата се свежда до преобразуване на изречения.

Дублаж, преведен по този начин, е разбираем и погрешен.

На зрителя му трябва нов сценарий, написан на целевия език, който предава добре съдържанието на видеото.
  • Японският избягва прекалено прямите изрази; естествената реплика често трябва да се изгради наново, непряко, а не да се смекчава дума по дума.
  • Корейският постоянно изпуска подлога; ако английските местоимения влязат в корейския със същата честота, текстът звучи чужд, дори всяка дума да е вярна.
  • Словоредът, регистърът, учтивите форми и онова, което една култура премълчава, се менят с всеки език; преводът не е добър само защото буквалният смисъл е оцелял.

„Добре“ не се побира в контролен списък, затова свеждаме целта до едно изречение: да се предаде добре съдържанието на видеото на целевия език. Това може да се измери:

100.3%

от качеството на експертен човешки превод при Familiar, оценено на сляпо спрямо експертни еталонни редакции

ФРЕНСКИ, КИТАЙСКИ, ХИНДИ, ИНДОНЕЗИЙСКИ (ПЪРВА ВЕРСИЯ НА ЕКСПЕРТНИ ПРОФЕСИОНАЛНИ ПРЕВОДАЧИ)
54.7%

по-малко съществени грешки в превода при Familiar на същите клипове (29 срещу 64)

СПРЯМО ELEVENLABS DUBBING V2 (ALPHA) · 111 СДВОЕНИ ДУБЛАЖА · 3 ЕЗИКА

Естествен звук: същият човек, на нов език

Произношението е почти решен въпрос. Интересните провали са отвъд него:

  • Идентичност: един и същ човек продължава да звучи като себе си на всеки език.
  • Емоция: онова, което говорещият е изпитвал, оцелява при смяната на езика.
  • Акцент, темпо, намерение: накъде натежава изречението, колко бързо върви, какво се опитва да постигне.

Целта се свежда по същия начин, както при превода: звукът съвпада с видеото. Не „генерирай език B с гласа от език A“. Същото изпълнение, на нов език. И сцената е част от звука: смехът, музиката, помещението.

270%

повече щети по фоновия звук при ElevenLabs (11.92 срещу 3.22 dB): музика, ефекти, атмосфера

ИЗСЛЕДВАНЕ НА DUBBING V2 (ALPHA) · СЪЩИТЕ КЛИПОВЕ
+27.8%

по-близко сходство с говорещия при Familiar (0.461 срещу 0.360), по-близко и на 11-те езика

СПРЯМО ELEVENLABS · ИЗСЛЕДВАНЕ НА DUBBING V1 · 418 СДВОЕНИ ДУБЛАЖА
ElevenLabsElevenLabsElevenLabsTHEIR DOCS, READ OCTOBER 30, 2026

Editing the translation means their old model.

On ElevenLabs' current Dubbing v2, in alpha, editing the translation and regenerating the audio through the API is for their Enterprise plans only. Their full editor, Dubbing Studio, is "only available via the v1 model" and "in maintenance mode", in their words. Dubbing v1 is the model our 418-pair study measured, and its output is mono.

+27.8%

FAMILIAR CLOSER TO THE REAL SPEAKER · ALL 11 LANGUAGES

261%

ELEVENLABS MORE BACKGROUND ERROR · THE MUSIC, THE AMBIENCE

+243.7%

FAMILIAR ON LAUGHTER AND REACTION SHAPE

ELEVENLABS DUBBING V1 · 418 PAIRED OUTPUTS · 11 LANGUAGES · AUGUST 5, 2026Read the study Their docs

Текстът на екрана е част от видеото

Съвременното видео разчита на текста на екрана: надписи, шеги, мемета, една-единствена дума, напасната към ритъма. Всеки от тях е визуално събитие на изходния език. Адаптирането му има две изисквания:

  • Никога не повреждайте видеото. Артефактите или визуалното разсейване правят резултата по-лош от оригинала.
  • Никога не го превеждайте буквално. Трябва да разберете защо този текст се появява точно в този момент и на това място, преди да можете да го адаптирате.

Днес мултимодалният модел за вземане на решения при локализация (MLDM) на Familiar, първият фундаментален модел за мултимодален превод, нова парадигма, първата по рода си, превежда заглавия, описания и субтитри заедно с дублажа. Текстът в кадъра е в разработка: екран на телефон или уличен знак, написани с термините, които вече сте избрали, а марка или име моделът решава в движение да остави, както е заснето, така че пликче Tostitos си остава Tostitos; вие избирате кой текст да се преведе. Правилото важи: ако редакцията може да се забележи, тя не е достатъчно добра.

ПЪРВИЯТ ФУНДАМЕНТАЛЕН МОДЕЛ ЗА МУЛТИМОДАЛЕН ПРЕВОД

Липсинк: успехът е да остане незабелязан

Синхронът на устните носи същото твърдо изискване: никога не повреждайте видеото. Най-високата похвала, която липсинкът на един дублаж може да заслужи, е въпросът „какво се е променило?“

Изглежда като най-маловажното от четирите; в готовото преживяване е почти обратното. Хората слушат с очите си: един и същ звук се чува като различни звуци при различни движения на устата; това е ефектът на Макгърк. Несъвпадащата уста е една от причините дублираното видео да е неприятно по начин, който зрителите не могат да назоват.
McGURK & MacDONALD, “HEARING LIPS AND SEEING VOICES,” NATURE 264 (1976)

Ефектът работи и в полза на дублажа. Щом устата съвпадне, мозъкът разрешава двусмислието в посока на съгласието: произношението звучи по-ясно, а тембърът звучи повече като същия човек.

Трудните случаи: гласове зад кадър, говорещи, които се застъпват, хора, които си приличат на вид или на глас, и редакция на устата, без да се счупи лицето. Сложете двама души в кадър и днешните инструменти синхронизират и двете уста едновременно.

Устните са само началото. Човек изпълнява едно изречение с цялото лице, с очите, веждите, скулите, главата, и с тялото: жестовете, кимането, половината такт, в който слуша.

Един проблем, а не четири

Всяко изискване се свеждаше до едно и също изречение. Естествен превод: напишете какво казва това видео, на целевия език. Естествен звук: запазете същото изпълнение в новите думи. Текст на екрана: разберете защо е там, преди да го пипнете. Липсинк: редактирайте човека, без да го счупите.

Същото изпълнение, на друг език.

Именно това решава MLDM, измерено на същите клипове и публикувано на /benchmark. Всяко решение се записва към задачата и може да бъде променено; днес творческите ви директори избират между вариантите на превода.

ИЗТОЧНИЦИ

  1. [1]Бенчмарк Familiar срещу ElevenLabs: пълни резултати, интервали и примери за слушане
  2. [2]AI срещу човешки превод: тест спрямо професионалисти
  3. [3]AI липсинк: какво е, какво пропуска, какво го превъзхожда
  4. [4]Защо дублажът зад граница „не звучи“ и как студиата го поправят (студийната версия на този аргумент)
  5. [5]McGurk & MacDonald, “Hearing lips and seeing voices,” Nature 264 (1976)

Мултимодален превод

Familiar Labs създава дублаж от ново поколение с мултимодален модел за вземане на решения при локализация (MLDM), първия фундаментален модел за мултимодален превод: един модел решава какво да се локализира в текста, звука и картината и ви показва вариантите. Вашият глас и устни, пренесени на нови езици. Екип от 8 души с PhD, с подкрепата на Samsung, RedBird и Gold House. Нашата мисия