За допомогою нового інструменту AI «Generative Fill» від Adobe Photoshop ви можете додавати текст до зображень

Функцію «Generative Fill», яка використовує хмарний синтез зображень для заповнення окремих частин зображення новою інформацією, згенерованою штучним інтелектом на основі текстового опису, була додана Adobe до бета-версії Photoshop у вівторок. Generative Fill, який використовує Adobe Firefly, працює подібно до методу «inpainting», який використовується в оновленнях DALL-E та Stable Diffusion з минулого року.

Adobe Firefly, унікальна модель синтезу зображень, створена Adobe, лежить в основі Generative Fill. Firefly — це модель штучного інтелекту глибокого навчання, яка була навчена на мільйонах стокових фотографій від Adobe, щоб зв’язати конкретні зображення з текстовими описами про них. Тепер люди можуть вводити те, що вони хочуть бачити (наприклад, «клоун на дисплеї комп’ютера»), і Firefly запропонує їм кілька варіантів на вибір. Generative Fill розробляє генерацію з урахуванням контексту, яка може легко включати синтетичні зображення в існуюче зображення за допомогою добре відомого підходу штучного інтелекту під назвою « inpainting ».

Користувачі вибирають область наявного зображення, яку вони бажають змінити перед використанням Generative Fill. «Контекстна панель завдань», яка дозволяє користувачам вводити опис того, що вони хочуть бачити, згенероване у вибраному регіоні, з’являється, коли вони вибирають його. Після обробки цих даних на серверах Adobe Photoshop повертає результати в програму. Після генерації користувач має вибір: вибрати з кількох поколінь можливості або створити нові параметри для перегляду.

Використання інструменту Generative Fill призводить до створення нового «генеративного шару», який дозволяє неруйнівні зміни вмісту зображення, такі як додавання, розширення або видалення, керуючись цими текстовими інструкціями. Він автоматично змінює точку огляду, освітлення та естетику зображення.

Бета-версія Photoshop тепер включає додаткові функції на основі штучного інтелекту на додаток до Generative Fill. Крім того, Firefly дає змогу Photoshop повністю видаляти елементи зі сцени або збільшувати розмір зображення шляхом створення нового вмісту навколо оригіналу, процес, відомий як « зафарбовування » в штучному інтелекті.

Adobe тільки зараз наздоганяє додавання цих функцій до свого флагманського редактора зображень, хоча генератор і редактор зображень DALL-E 2 від OpenAI мають їх із серпня минулого року (і різні саморобні випуски Stable Diffusion приблизно з того самого часу). Це правда, що для бізнесу, на спині якого, можливо, вже є величезна цільова відповідальність, це дійсно швидко, оскільки побоювання щодо створення шкідливого чи соціально стигматизованого контенту, використання зображень художників як навчальних матеріалів і посилення пропаганди чи дезінформації.

Подібно до цього, Adobe покладається на умови використання , які запобігають створенню «образливого, незаконного або конфіденційного» вмісту, а також блокують створення деяких захищених авторським правом, насильницьких і сексуальних ключових слів.

Крім того, Adobe активізує свою Ініціативу автентичності вмісту , яка використовує облікові дані вмісту для додавання метаданих до створених файлів, які допомагають відстежувати їхнє походження. Завдяки здатності Generative Fill легко деформувати очевидну медіа-реальність фотографії (правда, те, що Photoshop робив із самого початку), Adobe може легко змінювати зовнішній вигляд реальності фотографії.

Усі користувачі Creative Cloud, які мають підписку або безкоштовну пробну версію Photoshop, наразі можуть отримати доступ до Generative Fill у бета-версії програми Photoshop, перейшовши до розділу «Бета-програми» програми Creative Cloud. Він ще не підтримує китайських користувачів, не доступний для осіб віком до 18 років і наразі пропонує лише текстові інструкції англійською мовою. До кінця року Adobe має намір зробити Generative Fill доступним для всіх користувачів Photoshop, щоб будь-хто міг швидко створювати дворових клоунів.

Якщо у вас немає підписки на Creative Cloud на веб-сайті Adobe Firefly , ви також можете безкоштовно спробувати Generative Fill за допомогою облікового запису Adobe і веб-інструмента . Adobe щойно відкликала список очікування бета-версії Firefly.