Руководство

Как исправить рассинхрон в поющей фотографии

FreeLipSync TeamFreeLipSync Team|4 min read
Вымышленная южноазиатская певица смотрит в камеру с микрофоном рядом с ней во время урока по устранению неполадок синхронизации пения и фотографий.

Если поющая фотография выглядит несинхронизированной, исправьте входные данные перед регенерацией: используйте изображение, обращенное вперед, с открытым ртом, обрежьте тишину перед первым вокалом, выберите короткий фрагмент с четким ведущим вокалом и избегайте сильной реверберации или конкурирующих голосов. FreeLipSync не обеспечивает ручное отслеживание синхронизации после генерации, поэтому надежным контролем является чистая синхронизация источника.

Что вам нужно

  • Исходное изображение: Вымышленный певец смотрит в камеру, а микрофон намеренно отставлен в сторону. Это устраняет две распространенные проблемы с изображением — угол профиля и объект, пересекающий губы, — сохраняя при этом контекст производительности.
  • Входной звук, используемый в этом примере: 18-секундная оригинальная песня начинается четко и имеет один ведущий вокал. Если в вашем собственном клипе есть длинное инструментальное вступление, вокал толпы, перекрывающиеся гармонии или бит, маскирующий согласные, обрезайте его до более простой части для диагностического прохода.
  • Инструмент: Make Photo Sing

Диагностика одной переменной за раз. Сначала обрежьте звук, затем проверьте изображение, затем попробуйте другую вокальную часть. Изменение всего вместе делает невозможным узнать, какая коррекция сработала.

Исходное изображение и входные данные

Вымышленная южноазиатская певица смотрит в камеру с микрофоном рядом с ней во время урока по устранению неполадок синхронизации пения и фотографий.

Входной звук, используемый в этом примере

Точная английская расшифровка или тексты песен, использованные в общих демонстрационных носителях:

This is my moment, watch me rise, Spotlight shining in my eyes.

I found my voice, I'm breaking free, This is the start of the real me — Here I go, this is my time!

Необработанный результат

Необработанный результат — это ссылка на чистую входную пару, а не обещание, что каждая песня и портрет будут вести себя одинаково. Сначала посмотрите начало: последовательное смещение обычно указывает на ведущую тишину; нестабильное движение часто указывает на сложный образ или переполненный вокальный микс.

Откройте специальную страницу просмотра видео.

Пошаговый рабочий процесс

  1. Подготовьте одно четкое исходное изображение. — Используйте одно изображение, обращенное вперед, с видимым ртом, равномерным освещением, без рук, микрофона или тяжелой тени, закрывающей губы.
  2. Откройте соответствующий инструмент FreeLipSync. — Откройте связанный инструмент для этого рабочего процесса. Убедитесь, что режим ввода соответствует вашему источнику: текст, загруженная речь или аудио песни.
  3. Добавьте сценарий или аудиовход — Добавьте короткий чистый ввод. Сделайте первый тест простым, чтобы можно было легко определить, совпадают ли изображение и звук.
  4. Генерация результата синхронизации губ — Сгенерируйте один необработанный результат, не изменяя одновременно несколько переменных. Контролируемый первый проход значительно ускоряет устранение неполадок.
  5. Просмотрите полный результат перед публикацией — Смотреть со звуком от начала до конца. Проверьте видимость рта, время, произношение и то, честно ли клип представляет источник.

Почему эта установка работает

Генерация синхронизации губ основана на видимых ориентирах лица и слышимом времени голоса. Очистка этих двух сигналов более эффективна, чем повторное представление одной и той же проблемной пары или попытки скрыть несоответствие с более поздним урожаем.

Контрольный список качества

  • Удалите тишину перед первым спетым слогом и экспортируйте исправленный клип перед регенерацией.
  • Выберите один чистый вокал; избегайте наложений дуэтов, стеков хоруса и сильного эха при первом проходе.
  • Используйте портрет, обращенный вперед, с большим открытым ртом и без микрофона прямо напротив губ.

Распространенные ошибки, которых следует избегать

  • Диагностика одной переменной за раз. Сначала обрежьте звук, затем проверьте изображение, затем попробуйте другую вокальную часть. Изменение всего вместе делает невозможным узнать, какая коррекция сработала.
  • Не отправляйте повторно одно и то же проблемное изображение и аудио. Исправьте один ввод, экспортируйте его и запустите контролируемое сравнение.
  • Не публикуйте лицо, персонаж, запись или песню, если у вас нет необходимого разрешения или лицензии.

Вопросы, которые задают люди

Почему рот поздно начинает двигаться?

Распространенной причиной является ведущее молчание или мягкий, неясный вокал. Обрежьте файл так, чтобы первый предполагаемый звук начинался чисто, а затем восстановите его.

Могу ли я вручную переместить трек синхронизации губ после создания?

Не в текущем рабочем процессе Make Photo Sing. Исправьте синхронизацию звука или исходное изображение и создайте новый результат.

Почему рот слабо двигается, даже если время выбрано правильно?

Маленький, обращенный в сторону, затененный или закрытый рот может уменьшить видимость движений. Проверьте более четкое изображение на передней панели с тем же звуком.

Сделайте свою версию

Обрежьте одну чистую вокальную часть продолжительностью 10–20 секунд, соедините ее с свободным портретом и восстановите в Make Photo Sing.

Make Photo Sing

Related