АННОТАЦИЯ
Что такое генеративный ИИ
Генеративный ИИ, иногда называемый gen AI, представляет собой искусственный интеллект (ИИ), способный создавать оригинальный контент, такой как текст, изображения, видео, аудио или программный код, в ответ на промпт или запрос пользователя.
Определение держится на двух вещах: на входе промпт, а на выходе то, чего раньше не существовало.
ЧТО ДЕЛАЕТ ГЕНЕРАТИВНЫЙ ИИ
- Сильный инструмент для создания нового: первый черновик, набросок песни.
ЧЕГО ТРЕБУЕТ ПЕРЕВОД
- Работа уже существует, и задача в том, чтобы перенести её на другой язык без потерь.
Проверка на промпт
Спросите, что вводит пользователь. В генеративном ИИ это промпт: опишите, что нужно, и модель это создаст. В Familiar ничего. На входе ваше видео, на выходе та же игра на другом языке.
Сцена тоже остаётся: смех, музыка, атмосфера.
Откуда данные
Все данные, на которых мы обучали модель, создала сама команда Familiar.
MLDM берёт на себя рутину.
В каждом дубляже есть рутина: какой вариант перевода, какой голос, как следуют губы, и так для каждой реплики на каждом языке. Всё это решает MLDM, а каждое решение записывается в задачу дубляжа, чтобы ваша команда могла его изменить.
- СЕГОДНЯ
Ваши креативные директора видят варианты перевода.
Несколько вариантов шутки, сленг как есть, смягчённая ненормативная лексика для более юной аудитории. - В РАЗРАБОТКЕ
Выбор того, какие звуки останутся на языке оригинала, чьё лицо говорит и какой текст в кадре переводить.
Игра, кастинг и каждое творческое решение остаются за людьми, которые создали работу.
Мы ещё один инструмент в творческом процессе.
Почему именно путь качества, словами CEO: От человека к человеку, а не от ИИ к ИИ.
ВОПРОСЫ
Является ли Familiar генеративным ИИ?
Нет. Familiar работает как мультимодальная модель принятия решений о локализации (MLDM): она решает, как локализовать то, что уже есть, без всякого промпта. На входе ваше видео, на выходе та же игра на другом языке. Все данные, на которых мы обучали модель, создала сама команда Familiar. Мы ещё один инструмент в творческом процессе.
Придумывает ли Familiar слова или реплики?
Нет. Слова являются переводом сказанного, и ваши креативные директора могут проверить каждую реплику до рендера. Реплика, которую можно передать по-разному, например шутка, возвращается тремя вариантами перевода на выбор.
Чей голос звучит в дубляже?
Собственный голос говорящего, взятый из самого ролика и перенесённый на новый язык. Familiar дублирует на 30 языков, а исходное видео принимает на любом из 99 языков.
ИСТОЧНИКИ
МУЛЬТИМОДАЛЬНЫЙ ПЕРЕВОД
Familiar Labs создаёт дубляж нового поколения на основе мультимодальной модели принятия решений о локализации (MLDM). Это первая фундаментальная модель для мультимодального перевода: одна модель решает, что локализовать в тексте, аудио и видео, и показывает вам варианты. Ваш голос и губы, перенесённые на новые языки. В команде 8 человек с PhD; их поддерживают Samsung, RedBird и Gold House. Наша миссия