Чтобы озвучить существующее видео на другом языке, сначала подготовьте и проверьте перевод. Затем передайте в AI Video Dubbing готовую запись на нужном языке либо переведённый текст с подходящим голосом. FreeLipSync синхронизирует губы снятого человека с новой речью; сам по себе исходную речь этот этап не переводит.
В примере англоязычный ролик озвучен по-испански. Перевод был подготовлен заранее, а готовая испанская запись загружена в режиме Audio. Вариант Text описан отдельно.
Зачем озвучивать видео с помощью ИИ?
Показать готовое объяснение аудитории на другом языке
Вступление к уроку, описание продукта, ответ службы поддержки или региональное объявление уже может хорошо выглядеть, но другой аудитории нужен свой язык. Озвучивание сохраняет снятого человека, обстановку, жесты и мимику без повторной съёмки. Попросите носителя языка проверить смысл, термины, имена, цифры и интонацию. Если человек указывает на предмет, новая реплика должна подходить к этому моменту.
Сделать несколько языковых версий из одной съёмки
Разрешённое к использованию видео может стать основой разных языковых версий. Для каждой нужны проверенный текст и отдельное исполнение, зато не придётся снова собирать камеру, свет и актёра. Реальные движения и выражение лица из оригинала сохраняются: технология не создаёт заново всю игру человека. Поэтому естественные, универсальные жесты удобнее для повторного использования. Здесь показана только версия с английского на испанский, а не автоматический пакетный перевод.
Заранее утвердить произношение и темп
Готовая запись позволяет переводчику, диктору или продюсеру выбрать паузы, ударения и произношение до синхронизации. Если записи ещё нет, режим Text озвучит проверенный перевод подходящим готовым голосом или клонированным с разрешения владельца. Для замены реплики на том же языке см. руководство по переписыванию сценария. Если финальное аудио уже есть и перевод не нужен, см. замену речи загруженной записью.
Реальный пример: английский оригинал и испанский результат
Источник — вымышленная ведущая, созданная для демонстрации. Английский ролик длится около 7,96 секунды; в нём сказано:
Hello and welcome. In this short update, I will explain how our new workflow helps global teams share clear product messages.
Этот испанский перевод подготовили и проверили до генерации синхронизации:
Hola y bienvenidos. En esta breve actualización, explicaré cómo nuestro nuevo flujo de trabajo ayuda a los equipos globales a compartir mensajes de producto claros.
Готовый испанский голос прочитал текст за примерно 8,98 секунды. Именно эту запись загрузили в инструмент; её не извлекали из английского видео:
Готовая испанская запись для примера
Ниже — необработанный результат около девяти секунд без ручной правки движений губ. Сравните речь с испанским текстом, а движения — с оригиналом.
Необработанный испанский результат
Испанская речь примерно на секунду длиннее английского исходника, и результат следует новой записи. Не нужно сокращать перевод только ради совпадения длительности. Алгоритм может подобрать подходящие части снятого выступления. Но проверьте, соответствуют ли жесты и мимика новому смыслу.
Как сделать дубляж с готовой записью
- Выберите видео, которое можно изменять. Убедитесь в правах на материал и изображённого человека. Важнее совместимость жестов и выражения лица с переводом, чем длина ролика или постоянно видимый анфас рот.
- Переведите и проверьте. Уточните смысл, имена, цифры, термины, тон и связь слов с видимыми действиями или надписями.
- Подготовьте финальное аудио. Запишите диктора с разрешением на использование голоса или воспользуйтесь подходящим готовым либо разрешённым клонированным голосом. Прослушайте запись целиком.
- Загрузите и создайте результат. В AI Video Dubbing загрузите видео, выберите Audio, добавьте запись и запустите обработку. Пример создан именно так.
- Проверьте перед публикацией. Сверьте слова, произношение, жесты, надписи, звуковое оформление и права.
Если нужно изменить лишь фрагмент длинного фильма, экспортируйте его отдельно и верните результат в монтаж. Инструмент сам не находит фразу на всей временной шкале и не переводит надписи, не создаёт субтитры и не сводит музыку.
Когда вводить переведённый текст?
Выберите Text, если перевод утверждён, но окончательной записи ещё нет. Вставьте текст и задайте подходящий готовый или разрешённый клонированный голос — инструмент создаст речь и синхронизирует губы. Если утверждённая запись уже есть и важно сохранить её темп и произношение, используйте Audio. Оба режима сохраняют движения тела и мимику источника. Короткий клип может поддержать более длинную фразу, но действия, привязанные к конкретному моменту, требуют проверки. Актуальные ограничения указаны на странице тарифов.
Частые вопросы
FreeLipSync сам переводит английский на испанский?
Нет. Испанский текст для примера подготовили и проверили заранее. Инструмент синхронизирует новую речь с изображением.
В примере используется Text или Audio?
Audio. Готовую запись испанского предустановленного голоса загрузили в инструмент. Text создаёт голос из проверенного перевода.
Новая запись должна быть такой же длины, как оригинал?
Нет. Английский ролик длится около восьми секунд, испанское аудио и результат — около девяти. Оцените естественность жестов.
Можно загрузить запись диктора?
Да, в режиме Audio. Получите разрешение на использование голоса и изображения человека, произносящего новые слова.
Последнее обновление:
