Dzięki nowemu narzędziu sztucznej inteligencji „Generative Fill” z programu Adobe Photoshop możesz dodawać tekst do obrazów

Funkcja „Generative Fill”, która wykorzystuje opartą na chmurze syntezę obrazów w celu wypełnienia określonych części obrazu nowymi informacjami generowanymi przez sztuczną inteligencję na podstawie opisu tekstowego, została dodana przez firmę Adobe do wersji beta programu Photoshop we wtorek. Generative Fill, które wykorzystuje Adobe Firefly, działa podobnie do metody „inpainting”, która jest stosowana w aktualizacjach DALL-E i Stable Diffusion od zeszłego roku.

Sercem Generative Fill jest Adobe Firefly, unikalny model syntezy obrazu stworzony przez firmę Adobe. Firefly to model sztucznej inteligencji do głębokiego uczenia się, który został przeszkolony na milionach fotografii stockowych Adobe, aby połączyć określone obrazy z opisami tekstowymi na ich temat. Ludzie mogą teraz wpisać to, co chcą zobaczyć (na przykład „klaun na ekranie komputera”), a Firefly zapewni im kilka opcji do wyboru. Generative Fill rozwija generację uwzględniającą kontekst, która może bezproblemowo włączać syntetyczne obrazy do istniejącego obrazu przy użyciu dobrze znanego podejścia AI określanego jako „ inpainting ”.

Użytkownicy wybierają obszar istniejącego obrazu, który chcą zmienić przed użyciem Wypełnienia generatywnego. Po wybraniu pojawia się „kontekstowy pasek zadań”, który pozwala użytkownikom wprowadzić opis tego, co chcą zobaczyć w wybranym regionie. Po przetworzeniu tych danych na serwerach Adobe Photoshop zwraca wyniki do aplikacji. Po wygenerowaniu użytkownik ma możliwość wyboru spośród wielu możliwości wartych pokoleń lub stworzenia nowych opcji do przeglądania.

Użycie narzędzia Wypełnienie generatywne skutkuje utworzeniem nowej „Warstwy generatywnej”, która umożliwia nieniszczące zmiany zawartości obrazu, takie jak dodawanie, rozszerzanie lub usuwanie, kierując się tymi instrukcjami tekstowymi. Automatycznie modyfikuje punkt widzenia, oświetlenie i estetykę obrazu.

Wersja beta programu Photoshop zawiera teraz dodatkowe funkcje oparte na sztucznej inteligencji oprócz wypełniania generatywnego. Co więcej, Firefly umożliwił programowi Photoshop całkowite wymazanie elementów ze sceny lub powiększenie rozmiaru obrazu poprzez tworzenie nowej treści wokół oryginału, co w sztucznej inteligencji nazywa się „ odmalowaniem ”.

Adobe właśnie nadrabia zaległości w dodawaniu tych funkcji do swojego flagowego edytora obrazów, mimo że generator i edytor obrazów OpenAI DALL-E 2 mają je od sierpnia zeszłego roku (i różne wydania homebrew Stable Diffusion mniej więcej w tym samym czasie). To prawda, że ​​czas realizacji jest krótki dla firmy, która może już mieć na karku wymalowaną ogromną odpowiedzialność z powodu obaw związanych z tworzeniem szkodliwych lub napiętnowanych społecznie treści, wykorzystywaniem wizerunków artystów jako materiałów szkoleniowych oraz zasilaniem propagandy lub dezinformacji.

W podobny sposób Adobe opiera się na warunkach użytkowania , które uniemożliwiają konsumentom tworzenie „obraźliwych, niezgodnych z prawem lub poufnych” treści, a także blokują generowanie niektórych chronionych prawem autorskim, brutalnych i seksualnych słów kluczowych.

Ponadto firma Adobe intensyfikuje inicjatywę Content Authenticity Initiative, która wykorzystuje poświadczenia treści do dodawania metadanych do generowanych plików, które pomagają śledzić ich pochodzenie. Dzięki zdolności Generative Fill do łatwego wypaczania pozornej medialnej rzeczywistości zdjęcia (co prawda Photoshop robi od samego początku), Adobe jest w stanie łatwo zmienić wygląd rzeczywistości zdjęcia.

Wszyscy użytkownicy Creative Cloud, którzy mają subskrypcję programu Photoshop lub bezpłatną wersję próbną, mogą obecnie uzyskać dostęp do narzędzia Generative Fill w aplikacji Photoshop w wersji beta, przechodząc do obszaru „Aplikacje w wersji beta” aplikacji Creative Cloud. Nie obsługuje jeszcze chińskich użytkowników, nie jest dostępny dla osób poniżej 18 roku życia i obecnie oferuje tylko instrukcje tekstowe w języku angielskim. Do końca roku Adobe zamierza udostępnić funkcję Generative Fill wszystkim użytkownikom programu Photoshop, aby każdy mógł szybko tworzyć podwórkowe klauny.

Posiadając login Adobe i narzędzie internetowe, możesz także bezpłatnie wypróbować funkcję Generative Fill, jeśli nie masz subskrypcji Creative Cloud w witrynie Adobe Firefly . Lista oczekujących beta Firefly została właśnie wycofana przez firmę Adobe.