
- La nueva útil de video Modify de Luma Labs para Dream Machine usa IA para alterar cualquier video sin reorganización
- Cualquier personaje o entorno no perderá su movimiento o actuaciones originales
- Cualquier cosa, desde ajustes sutiles de vestuario hasta revisiones de imagen mágica completa, es factible
Luma Labs es conocido por producir videos de IA desde cero, pero la compañía tiene una nueva característica para su máquina de sueños que puede transfigurar por completo las imágenes de video reales de guisa sutil o descarada, incluso si es solo una vieja película circunscrito.
La nueva función de video Modify hace para videos poco así como las mejores herramientas de Photoshop para las imágenes. Puede cambiar la configuración de una imagen, el estilo, incluso los personajes completos, todos sin retornar a disparar, reanimarse o incluso ponerse de pie.
La compañía se jacta de que la impresión de video de IA preserva todo lo que le importa de la reproducción diferente, como el movimiento de actores, el situación, el tiempo y otros detalles esencia, al tiempo que altera cualquier otra cosa que desee.
El atuendo que llevas puesto, que has decidido que no eran tú, es de repente un conjunto de ropa completamente diferente. Ese resistente de la frazada ahora es un barco que navega por un mar tormentoso, y su amigo que agitaba en el suelo es en efectividad un cosmonauta en el espacio, todo sin el uso de pantallas verdes o la impresión de bahías.
La combinación de Luma de captura vanguardia de movimiento y rendimiento, estilo AI y lo que fuego preajustes estructurados hace posible ofrecer la abanico completa de videos reinventados.
Todo lo que necesita hacer es subir un video de hasta 10 segundos de largo para comenzar. Luego elija los preajustes de unión, flexión o reinvención.
Agregarse es la opción más sutil; Se centra en cambios mínimos, como el ajuste de la ropa a continuación o texturas diferentes en los muebles. Flex hace eso, pero igualmente puede ajustar el estilo del video, la iluminación y otros detalles más obvios. Reimagine, como su nombre indica, puede rehacer completamente todo sobre el video, llevarlo a otro mundo o rehacer a las personas a animales de dibujos animados o dirigir a cualquiera de pie en un tablero plano a una carrera ciberpunk hoverboard.
Video de IA flexible
Todo depende no solo de indicaciones, sino de imágenes de remisión y selecciones de cuadros de su video si lo desea. Como resultado, el proceso es mucho más factible de usar y flexible.
Aunque la modificación de video de IA no es monopolio de Luma, la compañía afirma que supera a los rivales como Runway y Pika conveniente a su fidelidad de rendimiento. Los videos alterados mantienen el jerigonza corporal de un actor, las expresiones faciales y la sincronización de labios. Los resultados finales aparecen como un todo orgánico, no solo bits cosidos.
Por supuesto, las herramientas de video de modificación tienen limitaciones. Estos todavía están limitados a 10 segundos por clip por ahora, lo que mantiene las cosas manejables en términos de tiempos de dilación. Sin bloqueo, si desea una película más larga, debe planificar y resolver cómo incorporar artísticamente diferentes tomas en una película.
Aún así, características como la capacidad de aislar rudimentos adentro de un disparo son un gran problema. A veces tienes una recital con la que estás muy contento, pero se supone que es un tipo diferente de personaje en un entorno diferente. Bueno, puede permanecer la recital intacta e trocar un estacionamiento por el mar y las piernas de su actor por una trasero de pescado.
Sueños a la efectividad
Es verdaderamente impresionante la prontitud y a fondo las herramientas de IA pueden reelaborar un poco de metraje. Estas herramientas no son solo un truco; Los modelos de IA son conscientes de las actuaciones y los plazos de una guisa que se siente más cerca de los humanos que cualquiera que haya pasado. Los modelos de IA en efectividad no entienden el ritmo, la continuidad o la estructura, pero son muy buenos para imitar estos aspectos.
Si aceptablemente las limitaciones técnicas y éticas evitarán que los laboratorios Luma recreen todo el cine en este momento, estas herramientas serán tentadoras para muchos productores de videos aficionados o independientes. Y aunque no veo que se vuelva tan ampliamente utilizado como filtros de fotos comunes, hay algunas ideas divertidas en las demostraciones de Luma que es posible que desee probar.