Adobe dokucza generatywnym narzędziom wideo AI

W poniedziałek Adobe ogłosiło plany dodania narzędzi do syntezy wideo AI do Premiere Pro i After Effects, podał Reuters . Jest to następstwem ogłoszenia z zeszłego tygodnia , że ​​edycja wideo oparta na sztucznej inteligencji pojawi się w Premiere Pro w maju.

Efekty Adobe Generator Video zostaną dostarczone przez firmę Adobe Firefly. Firefly, tryb syntezy obrazu, który zaprezentowaliśmy w marcu, zostanie rozszerzony o narzędzia do tworzenia wideo i audio. Premiere Pro to flagowa aplikacja firmy Adobe do edycji wideo i ulubione narzędzie w branży do edycji programów telewizyjnych i hollywoodzkich filmów.

W dzisiejszych czasach wykonywanie niektórych efektów specjalnych lub zadań edycyjnych może być często czasochłonne. Adobe ma na celu uproszczenie tego procesu za pomocą generatywnej sztucznej inteligencji. W filmie demonstracyjnym opublikowanym na blogu firma Adobe pokazała „Firefly for Video”, generując ścieżkę dźwiękową w tle, generując efekty dźwiękowe, zmieniając sezon wizualny w filmie, tworząc efekt wizualny dla słowa „topiony”, lokalizując i rozjaśniając twarz osoby , a także tworzenie nagrań dźwiękowych za pomocą poleceń tekstowych.

Na swoim blogu promocyjnym firma Adobe wspomina o funkcjach, których moglibyśmy oczekiwać od nowych narzędzi sztucznej inteligencji, w tym o niektórych z wymienionych powyżej (takich jak tworzenie efektów dźwiękowych i muzyki), a także o ulepszeniach kolorów tekstu, animacjach tekstu i logo, automatycznym tworzeniu scenorysów i kreatywność. co-pilots”, które rzekomo mogą generować praktyczne wskazówki, które pomogą użytkownikom w nauce umiejętności edytowania.

Jeśli takie tekstowe narzędzia do edycji wideo brzmią znajomo, to dlatego, że Runway ogłosił podobne możliwości we wrześniu, chociaż Runway nie spełnił jeszcze tych obietnic z dokładnością pokazaną w zwiastunie. Podobnie, prawdopodobnie mądrze jest robić wideo marketingowe Adobe z przymrużeniem oka, dopóki produkt nie zostanie wydany.

(I tylko czas pokaże, czy Adobe Firefly kiedykolwiek stworzy film przedstawiający Willa Smitha jedzącego spaghetti, który może konkurować z arcydziełem opracowanym przez ModelScope, model syntezy wideo typu open source).

W osobnym, ale powiązanym ogłoszeniu z zeszłego tygodnia, Adobe ogłosiło integrację edycji tekstu wideo z Adobe Premiere Pro, co pozwoli redaktorom przycinać i zmieniać kolejność filmów na podstawie automatycznie wykrywanych transkrypcji mowy wyodrębnionych z klipów wideo. Oto jak Adobe opisuje tę funkcję:

Premiere Pro to jedyne profesjonalne oprogramowanie do edycji, które obejmuje edycję tekstową, rewolucjonizując sposób, w jaki twórcy podchodzą do swojego rzemiosła, sprawiając, że edycja wideo jest tak prosta, jak kopiowanie i wklejanie tekstu. Edycja tekstu obsługiwana przez Adobe Sensei automatycznie analizuje i transkrybuje klipy, dzięki czemu redaktorzy, producenci i asystenci mogą po prostu kopiować i wklejać zdania w dowolnej kolejności i natychmiast widzieć, jak pojawiają się na osi czasu. Transkrypcje można przeszukiwać w oknie transkrypcji, aby zidentyfikować dokładne słowa i wyrażenia.

Firma Adobe pierwotnie ogłosiła podobną możliwość edycji tekstu wideo w ramach „Project Blink” w październiku, chociaż firma Adobe twierdzi, że te funkcje pochodzą z platformy „ Adobe Sensei”. Nie jest jasne, czy różnica ma charakter techniczny, czy tylko znak towarowy. Warto zauważyć, że Descript oferuje podobną funkcję do edycji filmów i podcastów.

Adobe twierdzi, że jego funkcje Firefly dla wideo zaczną być wdrażane „jeszcze w tym roku”, a także umożliwią ludziom zarejestrowanie się w celu wypróbowania Firefly, który jest obecnie w zamkniętej wersji beta. W międzyczasie Adobe obiecuje, że tekstowa edycja wideo pojawi się w Adobe Premiere Pro w maju.