La página de FreeLipSync — sube tu clip, añade el audio y la boca se ajusta al habla.
Edito vídeos con diálogo: entrevistas, sketches, dos presentadores en cuadro. Y durante meses el mismo problema me arruinó tomas buenísimas: el lip-sync sale perfecto con una sola persona, pero en cuanto hay dos hablando —y a veces pisándose— la boca se descuadra, la IA se confunde de rostro, y todo el clip se siente "raro" aunque no sepas por qué. Si haces contenido de diálogo, ya sabes exactamente de qué hablo.
Aquí va lo que de verdad me funcionó, después de arruinar bastantes exportaciones.
Veredicto rápido
Si necesitas re-sincronizar bocas en vídeos con varios hablantes —doblaje, diálogo, dos caras en pantalla— la vía gratuita más limpia que encontré es la herramienta Wav2Lip Online de FreeLipSync. Subes el clip, subes el audio, y ajusta el movimiento de labios sin reencuadrar todo tu montaje. Sin marca de agua en clips cortos, sin instalar nada. Prueba a re-sincronizar tu clip de diálogo aquí →
La clave que aprendí no es el software: es cómo preparas el material antes de subirlo. El resto de este artículo es eso.
Regla 1: un hablante, un clip
El error número uno es meter una escena entera con dos personas y esperar que la IA adivine a quién sincronizar. No lo hagas. Corta la escena por hablante: cuando habla Ana, ese es su clip; cuando responde Luis, otro clip. Sincroniza cada uno por separado con su pista de audio y luego los vuelves a montar en la línea de tiempo.
Suena tedioso. No lo es. Son dos cortes más por escena y te ahorra el efecto "boca que se mueve sola" que delata un vídeo mal hecho.
Regla 2: audio limpio o nada
El ruido de fondo, la música fuerte y —sobre todo— las voces superpuestas debilitan la sincronización. La IA analiza la forma de onda para encontrar los fonemas; si dos personas hablan a la vez, esa onda es un lío. Antes de subir, aísla la voz del hablante que vas a sincronizar. Graba en un sitio silencioso o limpia el audio. Un clip con voz limpia sincroniza mejor que uno "bonito" con eco.
Regla 3: encuadre frontal y boca visible
Para vídeo, mantén la boca del hablante visible durante todo el clip. Un perfil cerrado, una mano delante o un giro brusco de cabeza son justo donde la IA falla. Si tienes una escena con mucho movimiento, resérvala para los planos donde no necesitas sincronía y deja los planos frontales para las líneas que sí vas a re-sincronizar.
El flujo básico: cara, audio o texto, generar. Con diálogo, repítelo una vez por hablante.
Regla 4: que audio y vídeo duren casi lo mismo
Si tu audio traducido dura 12 segundos y el clip original dura 8, la IA tiene que estirar o recortar, y ahí aparecen bocas fuera de tiempo. Ajusta la duración del audio a la del plano (o al revés) antes de subir. En doblaje multilingüe esto es medio trabajo: el español ocupa más que el inglés, así que a veces conviene reencuadrar un pelín el clip para dar aire.
Dónde encaja FreeLipSync y qué te da gratis
Probé el Wav2Lip "de verdad" —clonar el repo, pelearme con un notebook— y funciona, pero es una tarde perdida cada vez. Para trabajo diario prefiero la versión web. El plan gratuito de FreeLipSync, sin tarjeta: clips de hasta 20 segundos, 133 caracteres de texto a voz por clip, sin marca de agua y un vídeo a la vez.
Para diálogo eso es perfecto, porque de todos modos estás troceando por hablante en clips cortos. Hice todo un proyecto de sketches en el plan gratis sin pagar nada.
Gratis cubre de sobra los clips cortos por hablante. Solo miré de pagar para lotes y clips más largos.
Una cara, varios idiomas — el mismo clip re-locutado para que cada quien lo escuche en el suyo.
Cuando quise renderizar varios a la vez, Starter cuesta 9,90 $/mes (hasta 3 minutos por vídeo, 800 caracteres, tres a la vez, descargas HD), y hay un Creator Pack único de 4,99 $ con cinco vídeos Pro, uso comercial y créditos que no caducan. Herramientas como Kapwing también sincronizan en más de 40 idiomas, pero para el flujo "trocea, limpia, sincroniza" gratis, esta combinación me cundió más.
En resumen
El lip-sync con varios hablantes no falla por el modelo: falla por el material. Trocea por hablante, limpia el audio, mantén la boca a cuadro y cuadra las duraciones. Haz esas cuatro cosas y hasta un diálogo a dos voces queda limpio.
¿Listo para probarlo con tu propia escena de diálogo? Re-sincroniza tu clip con FreeLipSync →
Sources
- Herramienta Wav2Lip Online de FreeLipSync: https://freelipsync.com/tools/wav2lip-online
- Página de inicio y detalles del plan gratuito: https://freelipsync.com
- Guía de lip-sync con IA (encuadre, audio limpio, duración): https://morphic.com/es/resources/how-to/how-to-create-ai-lip-sync-videos
- Los mejores generadores de lip-sync con IA para diálogo: https://www.capcut.com/es-es/resource/ai-lip-sync
- Doblaje con IA para localización de vídeos (Adobe Firefly): https://www.adobe.com/mx/products/firefly/features/ai-dubbing.html