Adobe driller generative AI-videoværktøjer

Mandag annoncerede Adobe planer om at tilføje AI-videosynteseværktøjer til Premiere Pro og After Effects, rapporterede Reuters . Dette følger efter sidste uges meddelelse om, at AI-drevet videoredigering ville komme til Premiere Pro i maj.

Adobe Generator Video Effects leveres af Adobe Firefly. Firefly, billedsyntesetilstanden, vi præsenterede i marts, vil blive udvidet til at omfatte værktøjer til oprettelse af video og lyd. Premiere Pro er Adobes flagskib til videoredigering og branchens foretrukne værktøj til redigering af tv-shows og Hollywood-film.

I dag kan det ofte være tidskrævende at udføre visse specielle effekter eller redigeringsopgaver. Adobe sigter mod at forenkle denne proces med generativ kunstig intelligens. I en demovideo, der blev lagt ud på deres blog, viste Adobe “Firefly for Video” ved at generere et baggrundslydspor, generere lydeffekter, ændre den visuelle sæson i en video, skabe en visuel effekt for ordet “smeltet”, lokalisere og lysne en persons ansigt , og også oprette lydoptagelser ved hjælp af tekstkommandoer.

I sin salgsfremmende blog nævner Adobe de funktioner, vi kunne forvente af dets nye AI-værktøjer, herunder nogle af dem, der er nævnt ovenfor (såsom oprettelse af lydeffekter og musik), såvel som tekstfarveforbedringer, tekst- og logoanimationer, automatisk oprettelse af storyboards og kreativitet. co-piloter”, der angiveligt kan generere praktiske tips til at hjælpe brugere med at lære redigeringsfærdigheder.

Hvis sådanne tekstbaserede videoredigeringsværktøjer lyder bekendte, er det fordi Runway annoncerede lignende muligheder i september, selvom Runway endnu ikke har indfriet disse løfter med den nøjagtighed, der er vist i teaseren. På samme måde er det nok klogt at tage en Adobe-marketingvideo med et gran salt, indtil produktet er frigivet.

(Og kun tiden vil vise, om Adobe Firefly nogensinde kan skabe en video af Will Smith, der spiser spaghetti, der kan konkurrere med mesterværket udviklet af ModelScope, en open source-videosyntesemodel.)

I en separat, men relateret meddelelse i sidste uge, annoncerede Adobe integrationen af ​​videotekstredigering i Adobe Premiere Pro, som vil give redaktører mulighed for at trimme og omarrangere videoer baseret på auto-detekterede taletransskriptioner ekstraheret fra videoklip. Sådan beskriver Adobe funktionen:

Premiere Pro er den eneste professionelle redigeringssoftware, der inkluderer tekstbaseret redigering, der revolutionerer den måde, skabere griber deres håndværk på, og gør videoredigering lige så let som at kopiere og indsætte tekst. Tekstredigering drevet af Adobe Sensei analyserer og transskriberer automatisk klip, så redaktører, producenter og assistenter blot kan kopiere og indsætte sætninger i den rækkefølge, de vil, og øjeblikkeligt se dem vises på tidslinjen. Transskriptioner kan søges i transskriptionsvinduet for at identificere nøjagtige ord og sætninger.

Adobe annoncerede oprindeligt en lignende videotekstredigeringsfunktion som en del af “Project Blink” i oktober, selvom Adobe nu siger, at disse funktioner kommer fra deres ” Adobe Sensei”-ramme. Det er ikke klart, om forskellen er teknisk eller blot et varemærke. Det er værd at bemærke, at Descript tilbyder en lignende funktion til redigering af videoer og podcasts.

Adobe siger, at dets Firefly-funktioner til video begynder at blive udrullet “senere i år” og giver folk mulighed for at tilmelde sig for at prøve Firefly, som i øjeblikket er i lukket beta. I mellemtiden lover Adobe, at tekstbaseret videoredigering kommer til Adobe Premiere Pro i maj.