Adobe ofreció un avance de las herramientas experimentales de IA generativa para la edición de vídeo y audio en su conferencia Adobe Max.
Adobe utiliza sus presentaciones "Sneaks" para mostrar las últimas tecnologías en las que están trabajando sus ingenieros y parece que la IA generativa está a punto de cambiar la edición de vídeo a lo grande.
Firefly Image 2 y Proyecto Stardust fueron titulares de Adobe Max por utilizar IA generativa para editar imágenes, pero hasta ahora no había herramientas similares para vídeo.
Project Fast Fill permite al editor añadir o eliminar elementos de las escenas de vídeo con la misma facilidad con la que edita una imagen fija. Esta función funciona con Adobe Firefly. El usuario puede editar un solo fotograma mediante sencillas indicaciones de texto y, a continuación, Project Fast Fill llevará a cabo la edición en el resto de los fotogramas.
Un ejemplo que Adobe demostró fue lo fácil que resultaba eliminar a las personas que caminaban por el fondo de una escena.
Y después de la edición, aquí está el resultado:
En el segundo ejemplo, se seleccionó una zona de la camisa de un hombre y, a continuación, al introducir el texto "corbata", se generaron 4 imágenes del hombre con corbata. Al seleccionar una de las opciones, el vídeo muestra al hombre con corbata.
Una vez generado, éste es el resultado:
Imagina cuánto tiempo y dinero ahorrarás en producción y edición.
Si una escena se estropea porque alguien entra en el plano, no hace falta hacer otra toma. Si el director decide que no le gusta la ropa que lleva un actor en la toma, no hay necesidad de cambiar el vestuario y volver a rodar.
En Presentación a hurtadillas también incluye otras potentes funciones de edición de vídeo.
Project Scene Change permite al editor de vídeo tomar dos vídeos grabados desde ángulos diferentes y crear una escena compuesta con movimiento de cámara sincronizado.
El proyecto Dub Dub utiliza la IA para automatizar el proceso de doblaje, que es costoso y laborioso. La función crea automáticamente audio traducido en todos los idiomas compatibles conservando la voz del locutor.
¿Te gustaría ver tu vieja película favorita con mejor resolución? Project Res Up utiliza la tecnología upsampling basada en la difusión para convertir un vídeo de baja resolución en uno de alta resolución.
Comprueba lo bien que funciona.
Si alguna vez has intentado editar incluso un vídeo sencillo para YouTube, sabrás cuánto tiempo puede llevarte. Las herramientas de edición de vídeo con IA que requieren poco más que indicaciones de texto cambiarán las reglas del juego.
Si al final Hollywood llega a un acuerdo con los actores y guionistas, esperemos que estas herramientas nos ayuden a ver nuestras series favoritas un poco antes.
