Adobe retar generativa AI-videoverktyg

På måndagen tillkännagav Adobe planer på att lägga till AI-videosyntesverktyg till Premiere Pro och After Effects, rapporterade Reuters . Detta följer på förra veckans tillkännagivande om att AI-driven videoredigering skulle komma till Premiere Pro i maj.

Adobe Generator Video Effects kommer att tillhandahållas av Adobe Firefly. Firefly, bildsyntesläget vi presenterade i mars, kommer att utökas med verktyg för att skapa video och ljud. Premiere Pro är Adobes flaggskepp för videoredigering och branschens favoritverktyg för att redigera TV-program och Hollywood-filmer.

Nuförtiden kan det ofta vara tidskrävande att utföra vissa specialeffekter eller redigera uppgifter. Adobe strävar efter att förenkla denna process med generativ artificiell intelligens. I en demovideo som lades upp på deras blogg visade Adobe ”Firefly for Video” som genererar ett bakgrundsljudspår, genererar ljudeffekter, ändrar den visuella årstiden i en video, skapar en visuell effekt för ordet ”smält”, lokaliserar och lyser upp en persons ansikte , och även skapa ljudinspelningar med textkommandon.

I sin reklamblogg nämner Adobe de funktioner vi kan förvänta oss av dess nya AI-verktyg, inklusive några av de som listas ovan (som att skapa ljudeffekter och musik), såväl som textfärgförbättringar, text- och logotypanimationer, automatiskt skapande storyboards och kreativitet. co-pilots” som förmodligen kan generera praktiska tips för att hjälpa användare att lära sig redigeringsfärdigheter.

Om sådana textbaserade videoredigeringsverktyg låter bekanta, beror det på att Runway tillkännagav liknande funktioner i september, även om Runway ännu inte har levererat dessa löften med den noggrannhet som visas i teasern. På samma sätt är det förmodligen klokt att ta en Adobe marknadsföringsvideo med en nypa salt tills produkten släpps.

(Och bara tiden kommer att utvisa om Adobe Firefly någonsin kan skapa en video där Will Smith äter spagetti som kan konkurrera med mästerverket som utvecklats av ModelScope, en videosyntesmodell med öppen källkod.)

I ett separat men relaterat tillkännagivande förra veckan tillkännagav Adobe integrationen av videotextredigering i Adobe Premiere Pro, vilket kommer att göra det möjligt för redaktörer att trimma och ändra ordning på videor baserat på automatiskt upptäckta taltranskript som extraherats från videoklipp. Så här beskriver Adobe funktionen:

Premiere Pro är den enda professionella redigeringsmjukvaran som inkluderar textbaserad redigering, vilket revolutionerar sättet kreatörer närmar sig sitt hantverk och gör videoredigering lika enkelt som att kopiera och klistra in text. Textredigering som drivs av Adobe Sensei analyserar och transkriberar automatiskt klipp så att redaktörer, producenter och assistenter helt enkelt kan kopiera och klistra in meningar i vilken ordning de vill och omedelbart se dem visas på tidslinjen. Transkriptioner kan sökas i transkriptionsfönstret för att identifiera exakta ord och fraser.

Adobe tillkännagav ursprungligen en liknande videotextredigeringsmöjlighet som en del av ”Project Blink” i oktober, även om Adobe nu säger att dessa funktioner kommer från dess ” Adobe Sensei”-ramverk. Det är inte klart om skillnaden är teknisk eller bara ett varumärke. Det är värt att notera att Descript erbjuder en liknande funktion för redigering av videor och podcaster.

Adobe säger att dess Firefly-funktioner för video kommer att börja rullas ut ”senare i år” samt att låta människor registrera sig för att prova Firefly, som för närvarande är i stängd beta. Under tiden lovar Adobe att textbaserad videoredigering kommer till Adobe Premiere Pro i maj.