Adobe se burla de las herramientas de video generativas de IA

El lunes, Adobe anunció planes para agregar herramientas de síntesis de video AI a Premiere Pro y After Effects, informó Reuters . Esto sigue al anuncio de la semana pasada de que la edición de video impulsada por IA llegaría a Premiere Pro en mayo.

Los efectos de video de Adobe Generator serán proporcionados por Adobe Firefly. Firefly, el modo de síntesis de imágenes que presentamos en marzo, se ampliará para incluir herramientas de creación de video y audio. Premiere Pro es la aplicación de edición de video insignia de Adobe y la herramienta favorita de la industria para editar programas de televisión y películas de Hollywood.

Hoy en día, realizar ciertos efectos especiales o tareas de edición a menudo puede llevar mucho tiempo. Adobe pretende simplificar este proceso con inteligencia artificial generativa. En un video de demostración publicado en su blog, Adobe mostró «Firefly for Video» generando una banda sonora de fondo, generando efectos de sonido, cambiando la estación visual en un video, creando un efecto visual para la palabra «derretido», ubicando e iluminando el rostro de una persona. , y también creando grabaciones de audio usando comandos de texto.

En su blog promocional, Adobe menciona las características que podríamos esperar de sus nuevas herramientas de IA, incluidas algunas de las enumeradas anteriormente (como la creación de efectos de sonido y música), así como mejoras en el color del texto, animaciones de texto y logotipo, guiones gráficos de creación automática. y creatividad copilotos” que supuestamente pueden generar consejos prácticos para ayudar a los usuarios a aprender habilidades de edición.

Si estas herramientas de edición de video basadas en texto le suenan familiares, es porque Runway anunció capacidades similares en septiembre, aunque Runway aún tiene que cumplir esas promesas con la precisión que se muestra en el avance. Del mismo modo, probablemente sea prudente tomar un video de marketing de Adobe con un grano de sal hasta que se lance el producto.

(Y solo el tiempo dirá si Adobe Firefly puede alguna vez crear un video de Will Smith comiendo espagueti que pueda competir con la obra maestra desarrollada por ModelScope, un modelo de síntesis de video de código abierto).

En un anuncio separado pero relacionado la semana pasada, Adobe anunció la integración de la edición de texto de video en Adobe Premiere Pro, que permitirá a los editores recortar y reordenar videos en función de transcripciones de voz detectadas automáticamente y extraídas de clips de video. Así es como Adobe describe la característica:

Premiere Pro es el único software de edición profesional que incluye edición basada en texto, lo que revoluciona la forma en que los creadores abordan su oficio, haciendo que la edición de video sea tan fácil como copiar y pegar texto. La edición de texto con tecnología de Adobe Sensei analiza y transcribe automáticamente los clips para que los editores, productores y asistentes puedan simplemente copiar y pegar oraciones en el orden que deseen y verlos aparecer instantáneamente en la línea de tiempo. Las transcripciones se pueden buscar en la ventana de transcripción para identificar palabras y frases exactas.

Adobe anunció originalmente una capacidad de edición de texto de video similar como parte del «Proyecto Blink» en octubre, aunque Adobe ahora dice que estas características provienen de su marco «Adobe Sensei». No está claro si la diferencia es técnica o solo una marca comercial. Vale la pena señalar que Descript ofrece una función similar para editar videos y podcasts.

Adobe dice que sus funciones de Firefly para video comenzarán a implementarse «a finales de este año», además de permitir que las personas se registren para probar Firefly, que actualmente se encuentra en versión beta cerrada. Mientras tanto, Adobe promete que la edición de video basada en texto llegará a Adobe Premiere Pro en mayo.