El servicio de creación y edición de videos con inteligencia artificial de Runway agregó la función de renovación de video a video prometida a su plataforma de modelo Gen-3 Alpha. La herramienta de video a video le permite enviar un video y un mensaje de texto para modificarlo. Los cambios pueden ajustar la configuración, los artistas u otros elementos del video para que coincidan con el mensaje de texto o con cualquiera de las sugerencias de estilos preestablecidos.
La función de video a video es la última incorporación importante a las opciones de creación de videos de Runway. Runway ya permite a los usuarios comenzar con texto o imágenes para definir el aspecto y el movimiento del video. Ahora, al comenzar con un video del mundo real, los usuarios pueden definir el movimiento por adelantado y luego usar la IA para alterar el diseño y la estética. Runway entrenó la función en un gran conjunto de videos e imágenes subtitulados con detalles para enseñarle al modelo de IA cómo entender las películas cargadas y las indicaciones para cambiarlas. Es como ver un video nuevo de otro universo por completo. Puedes ver cómo funciona a continuación.
“Video to Video representa un nuevo mecanismo de control para el movimiento preciso, la expresividad y la intención en las generaciones”, explicó Runway en las redes sociales. “Para usar Video to Video, simplemente sube tu video de entrada, indícalo en la dirección estética que desees o elige entre una colección de estilos preestablecidos”.
Multiverso cinematográfico
Cuando se combina con la capacidad existente de Gen-3 Alpha para manejar transiciones complejas y rostros y emociones humanas expresivas, los resultados pueden ser bastante espectaculares. Runway se apresuró a ampliar Gen-3 Alpha con nuevas opciones. Más recientemente, la empresa mostró la versión Gen-3 Alpha Turbo de su modelo, que sacrifica algunas funciones por velocidad. Junto con la opción de transformación de video a video, la herramienta también funciona con Motion Brush, controles avanzados de cámara, modo director y otras funciones de edición de video más granulares.
El Gen-3 Alpha es mucho más versátil y fácil de usar que el modelo Gen-2. Dicho esto, tiene limitaciones a pesar de su impresionante rendimiento. Actualmente, puede generar videoclips de hasta 10 segundos de duración, lo que no es precisamente un largometraje. La velocidad y la calidad pueden compensar eso hasta que pueda durar más. Sin embargo, Runway tiene cada vez más competencia a la que debe superar.
El modelo más conocido es el Sora de OpenAI, pero no es el único. Stability AI, Pika, Dream Machine de Luma Labs y otros están compitiendo para llevar los modelos de video de IA al público. Incluso la empresa matriz de TikTok, Bytedance, tiene un creador de videos de IA llamado Jimeng.
Si desea probar la herramienta de video a video de Runway, Gen-3 Alpha está accesible para usuarios con planes pagos a partir de $12 por mes.