Adobe дражнить генеративні відеоінструменти AI

У понеділок Adobe оголосила про плани додати інструменти штучного синтезу відео в Premiere Pro і After Effects, повідомляє Reuters . Минулого тижня було оголошено про те, що редагування відео за допомогою штучного інтелекту з’явиться в Premiere Pro у травні.

Відеоефекти Adobe Generator надаватиме Adobe Firefly. Firefly, режим синтезу зображень, який ми представили в березні, буде розширено за допомогою інструментів для створення відео та аудіо. Premiere Pro — це флагманська програма для редагування відео від Adobe і улюблений інструмент індустрії для редагування телешоу та голлівудських фільмів.

У наш час виконання певних спецефектів або редагування часто займає багато часу. Adobe прагне спростити цей процес за допомогою генеративного штучного інтелекту. У демонстраційному відео, опублікованому у своєму блозі, Adobe показала «Firefly for Video», що генерує фоновий саундтрек, генерує звукові ефекти, змінює візуальний сезон у відео, створює візуальний ефект для слова «розтанув», визначає місце розташування та освітлює обличчя людини. , а також створення аудіозаписів за допомогою текстових команд.

У своєму рекламному блозі Adobe згадує про функції, які ми можемо очікувати від своїх нових інструментів штучного інтелекту, включаючи деякі з перерахованих вище (наприклад, створення звукових ефектів і музики), а також покращення кольору тексту, анімації тексту та логотипу, автоматичне створення розкадровок і творчість. co-pilots», яка нібито може генерувати практичні поради, які допоможуть користувачам навчитися навичкам редагування.

Якщо такі текстові інструменти для редагування відео звучать знайомо, це тому, що Runway оголосила про подібні можливості у вересні, хоча Runway ще не виконав ці обіцянки з точністю, показаною в тизері. Подібним чином, мабуть, доцільно поставитися до рекламного відео Adobe із недовірою, поки продукт не буде випущено.

(І лише час покаже, чи зможе Adobe Firefly коли-небудь створити відео Вілла Сміта, який їсть спагетті, яке зможе конкурувати з шедевром, розробленим ModelScope, моделлю синтезу відео з відкритим кодом.)

В окремому, але пов’язаному з цим анонсі минулого тижня Adobe оголосила про інтеграцію редагування відеотексту в Adobe Premiere Pro, що дозволить редакторам обрізати та змінювати порядок відео на основі автоматично виявлених розшифровок мовлення, вилучених із відеокліпів. Ось як Adobe описує цю функцію:

Premiere Pro — це єдине професійне програмне забезпечення для редагування, яке включає редагування на основі тексту, революціонізуючи підхід творців до своєї справи, роблячи редагування відео таким же простим, як копіювання та вставлення тексту. Редагування тексту на основі технології Adobe Sensei автоматично аналізує та транскрибує кліпи, щоб редактори, продюсери та асистенти могли просто копіювати та вставляти речення в будь-якому порядку й миттєво бачити їх на часовій шкалі. Стенограми можна шукати у вікні стенограми, щоб визначити точні слова та фрази.

Adobe спочатку анонсувала подібну можливість редагування відеотексту в рамках «Project Blink» у жовтні, хоча Adobe тепер каже, що ці функції походять від її фреймворку «Adobe Sensei». Незрозуміло, технічна різниця чи лише торгова марка. Варто зазначити, що Descript пропонує подібну функцію для редагування відео та подкастів.

Adobe каже, що її функції Firefly для відео почнуть розгортатися «пізніше цього року», а також дозволять людям зареєструватися, щоб спробувати Firefly , який зараз знаходиться в закритій бета-версії. Тим часом Adobe обіцяє, що текстове редагування відео з’явиться в Adobe Premiere Pro у травні.