В понедельник Adobe объявила о планах добавить инструменты синтеза видео с помощью ИИ в Premiere Pro и After Effects, сообщает Reuters . Это последовало за объявлением на прошлой неделе о том, что редактирование видео с помощью ИИ появится в Premiere Pro в мае.
Видеоэффекты Adobe Generator будут предоставлены Adobe Firefly. Firefly, режим синтеза изображений, который мы представили в марте, будет расширен за счет включения инструментов для создания видео и аудио. Premiere Pro — это флагманское приложение Adobe для редактирования видео и любимый в отрасли инструмент для редактирования телешоу и голливудских фильмов.
В настоящее время выполнение определенных специальных эффектов или задач редактирования часто может занимать много времени. Adobe стремится упростить этот процесс с помощью генеративного искусственного интеллекта. В демонстрационном видео, размещенном в их блоге, Adobe показала «Светлячок для видео», генерирующий фоновую звуковую дорожку, генерирующий звуковые эффекты, изменяющий визуальный сезон в видео, создающий визуальный эффект для слова «расплавленный», определяющий местонахождение и осветляющий лицо человека. , а также создание аудиозаписей с помощью текстовых команд.
В своем рекламном блоге Adobe упоминает функции, которые мы можем ожидать от своих новых инструментов искусственного интеллекта, в том числе некоторые из перечисленных выше (например, создание звуковых эффектов и музыки), а также улучшения цвета текста, анимацию текста и логотипов, автоматическое создание раскадровок. и творчество. второстепенные пилоты», которые якобы могут генерировать практические советы, помогающие пользователям освоить навыки редактирования.
Если такие текстовые инструменты редактирования видео кажутся вам знакомыми, то это потому, что Runway анонсировала аналогичные возможности в сентябре, хотя Runway еще не выполнила эти обещания с точностью, показанной в тизере. Точно так же, вероятно, было бы разумно воспринимать маркетинговое видео Adobe с недоверием, пока продукт не будет выпущен.
(И только время покажет, сможет ли Adobe Firefly создать видео Уилла Смита, поедающего спагетти, которое сможет конкурировать с шедевром, разработанным ModelScope, моделью синтеза видео с открытым исходным кодом.)
В отдельном, но связанном объявлении на прошлой неделе Adobe объявила об интеграции редактирования видеотекста в Adobe Premiere Pro, что позволит редакторам обрезать и изменять порядок видео на основе автоматически обнаруженных расшифровок речи, извлеченных из видеоклипов. Вот как Adobe описывает эту функцию:
Premiere Pro — единственное профессиональное программное обеспечение для редактирования, которое включает в себя редактирование на основе текста, революционизируя подход создателей к своему ремеслу, делая редактирование видео таким же простым, как копирование и вставка текста. Редактирование текста с помощью Adobe Sensei автоматически анализирует и расшифровывает клипы, поэтому редакторы, продюсеры и помощники могут просто копировать и вставлять предложения в любом порядке, который они хотят, и мгновенно видеть их появление на временной шкале. Стенограммы можно искать в окне стенограммы, чтобы определить точные слова и фразы.
Первоначально Adobe анонсировала аналогичную возможность редактирования видеотекста в рамках «Project Blink» в октябре, хотя теперь Adobe заявляет, что эти функции исходят из ее платформы «Adobe Sensei». Неясно, является ли разница технической или просто торговой маркой. Стоит отметить, что Descript предлагает аналогичную функцию для редактирования видео и подкастов.
Adobe заявляет, что ее функции Firefly для видео начнут развертываться «позже в этом году», а также позволят людям зарегистрироваться, чтобы опробовать Firefly, который в настоящее время находится в стадии закрытого бета-тестирования. Тем временем Adobe обещает, что текстовое редактирование видео появится в Adobe Premiere Pro в мае.