Adobe prende in giro gli strumenti video generativi di intelligenza artificiale

Lunedì, Adobe ha annunciato l’intenzione di aggiungere strumenti di sintesi video AI a Premiere Pro e After Effects, ha riferito Reuters . Ciò segue l’annuncio della scorsa settimana che l’editing video basato sull’intelligenza artificiale sarebbe arrivato su Premiere Pro a maggio.

Gli effetti video di Adobe Generator saranno forniti da Adobe Firefly. Firefly, la modalità di sintesi delle immagini che abbiamo presentato a marzo, sarà ampliata per includere strumenti per la creazione di video e audio. Premiere Pro è l’applicazione di editing video di punta di Adobe e lo strumento preferito del settore per l’editing di programmi TV e film di Hollywood.

Al giorno d’oggi, l’esecuzione di determinati effetti speciali o attività di modifica può spesso richiedere molto tempo. Adobe mira a semplificare questo processo con l’intelligenza artificiale generativa. In un video dimostrativo pubblicato sul proprio blog, Adobe ha mostrato “Firefly for Video” generando una colonna sonora di sottofondo, generando effetti sonori, cambiando la stagione visiva in un video, creando un effetto visivo per la parola “melted”, localizzando e illuminando il viso di una persona e anche la creazione di registrazioni audio utilizzando i comandi di testo.

Nel suo blog promozionale, Adobe menziona le funzionalità che potremmo aspettarci dai suoi nuovi strumenti AI, inclusi alcuni di quelli sopra elencati (come la creazione di effetti sonori e musica), nonché miglioramenti del colore del testo, animazioni di testo e logo, creazione automatica di storyboard e creatività. co-pilots”che presumibilmente possono generare suggerimenti pratici per aiutare gli utenti ad apprendere le capacità di editing.

Se tali strumenti di editing video basati su testo suonano familiari, è perché Runway ha annunciato funzionalità simili a settembre, sebbene Runway non abbia ancora mantenuto quelle promesse con l’accuratezza mostrata nel teaser. Allo stesso modo, è probabilmente saggio prendere un video di marketing Adobe con le pinze fino a quando il prodotto non viene rilasciato.

(E solo il tempo dirà se Adobe Firefly potrà mai creare un video di Will Smith che mangia gli spaghetti che possa competere con il capolavoro sviluppato da ModelScope, un modello di sintesi video open source.)

In un annuncio separato ma correlato la scorsa settimana, Adobe ha annunciato l’integrazione dell’editing di testo video in Adobe Premiere Pro, che consentirà agli editor di tagliare e riordinare i video in base alle trascrizioni vocali rilevate automaticamente estratte dai video clip. Ecco come Adobe descrive la funzione:

Premiere Pro è l’unico software di editing professionale che include l’editing basato su testo, rivoluzionando il modo in cui i creatori si avvicinano al loro mestiere, rendendo l’editing video facile come copiare e incollare il testo. L’editing di testo basato su Adobe Sensei analizza e trascrive automaticamente le clip in modo che editor, produttori e assistenti possano semplicemente copiare e incollare le frasi nell’ordine desiderato e vederle apparire immediatamente sulla timeline. Le trascrizioni possono essere cercate nella finestra della trascrizione per identificare parole e frasi esatte.

Adobe ha originariamente annunciato una funzionalità di modifica del testo video simile come parte di “Project Blink” in ottobre, sebbene Adobe ora affermi che queste funzionalità provengono dal suo framework “Adobe Sensei”. Non è chiaro se la differenza sia tecnica o solo un marchio di fabbrica. Vale la pena notare che Descript offre una funzionalità simile per la modifica di video e podcast.

Adobe afferma che le sue funzionalità Firefly per i video inizieranno a essere implementate “entro la fine dell’anno”, oltre a consentire alle persone di registrarsi per provare Firefly, che è attualmente in beta chiusa. Nel frattempo, Adobe promette che l’editing video basato su testo arriverà su Adobe Premiere Pro a maggio.