Mit dem neuen KI-Tool „Generative Fill“ von Adobe Photoshop können Sie Text zu Bildern hinzufügen

Die „Generative Fill“-Funktion, die cloudbasierte Bildsynthese nutzt, um bestimmte Teile eines Bildes mit neuen KI-generierten Informationen basierend auf einer Textbeschreibung zu füllen, wurde am Dienstag von Adobe zur Photoshop-Beta hinzugefügt . Generative Fill, das Adobe Firefly verwendet, funktioniert ähnlich wie die „Inpainting“-Methode, die seit letztem Jahr in DALL-E- und Stable Diffusion-Updates verwendet wird.

Adobe Firefly, ein einzigartiges Bildsynthesemodell von Adobe, ist das Herzstück von Generative Fill. Firefly ist ein Deep-Learning-KI-Modell, das anhand von Millionen von Stockfotos von Adobe trainiert wurde, um bestimmte Bilder mit Textbeschreibungen darüber zu verknüpfen. Die Leute können jetzt eingeben, was sie sehen möchten (zum Beispiel „einen Clown auf einem Computerbildschirm“) und Firefly bietet ihnen eine Reihe von Auswahlmöglichkeiten an. Generative Fill entwickelt eine kontextbewusste Generierung, die mithilfe eines bekannten KI-Ansatzes namens „ Inpainting “ synthetische Bilder nahtlos in ein vorhandenes Bild integrieren kann.

Benutzer wählen den Bereich eines vorhandenen Bildes aus, den sie ändern möchten, bevor sie die generative Füllung verwenden. Eine „kontextbezogene Taskleiste“, in der Benutzer eine Beschreibung dessen eingeben können, was in der ausgewählten Region generiert werden soll, wird angezeigt, sobald sie diese ausgewählt haben. Nach der Verarbeitung dieser Daten auf den Servern von Adobe gibt Photoshop die Ergebnisse an die Anwendung zurück. Nach der Generierung hat der Benutzer die Wahl, aus den Möglichkeiten mehrerer Generationen auszuwählen oder neue Optionen zur Durchsicht zu erstellen.

Die Verwendung des Werkzeugs „Generative Füllung“ führt zur Erstellung einer neuen „generativen Ebene“, die zerstörungsfreie Änderungen am Bildinhalt, wie etwa Hinzufügungen, Erweiterungen oder Entfernungen, anhand dieser Textanweisungen ermöglicht. Es passt sich automatisch dem Blickwinkel, der Beleuchtung und der Ästhetik des Bildes an.

Die Photoshop-Betaversion enthält jetzt zusätzlich zu Generative Fill zusätzliche KI-gestützte Funktionen. Darüber hinaus hat Firefly es Photoshop ermöglicht, Elemente vollständig aus einer Szene zu löschen oder die Größe eines Bildes zu vergrößern, indem neue Inhalte rund um das Original erstellt werden, ein Vorgang, der in der künstlichen Intelligenz als „Outpainting“ bezeichnet wird .

Adobe ist gerade dabei, diese Funktionen zu seinem Flaggschiff-Bildeditor hinzuzufügen, obwohl der DALL-E 2-Bildgenerator und -Editor von OpenAI sie seit August letzten Jahres (und seit ungefähr derselben Zeit verschiedene Homebrew-Versionen von Stable Diffusion) haben. Es stimmt, dass die Bearbeitungszeit für ein Unternehmen schnell ist, das aufgrund von Bedenken hinsichtlich der Erstellung schädlicher oder sozial stigmatisierter Inhalte, der Verwendung von Künstlerbildern als Schulungsmaterial und der Verbreitung von Propaganda oder Desinformation möglicherweise bereits ein großes Haftungsrisiko auf sich geladen hat.

In ähnlicher Weise beruft sich Adobe auf Nutzungsbedingungen , die Verbraucher daran hindern , „beleidigende, rechtswidrige oder vertrauliche“ Inhalte zu erstellen, und außerdem die Generierung einiger urheberrechtlich geschützter, gewalttätiger und sexueller Schlüsselwörter blockieren.

Darüber hinaus verstärkt Adobe seine Content Authenticity Initiative, die Content Credentials verwendet , um Metadaten zu generierten Dateien hinzuzufügen, die dabei helfen, deren Herkunft zu verfolgen. Mit der Fähigkeit von Generative Fill, die scheinbare Medienrealität eines Fotos leicht zu verzerren (was Photoshop zugegebenermaßen seit seiner Einführung tut), ist Adobe in der Lage, das Erscheinungsbild der Realität eines Fotos leicht zu verändern.

Alle Creative Cloud-Benutzer, die über ein Photoshop-Abonnement oder eine kostenlose Testversion verfügen, können derzeit in der Photoshop-Beta-App auf Generative Fill zugreifen, indem sie zum Bereich „Beta-Apps“ der Creative Cloud-App gehen. Es unterstützt noch keine chinesischen Benutzer, ist für Personen unter 18 Jahren nicht zugänglich und bietet derzeit nur Textanweisungen in englischer Sprache. Bis Ende des Jahres will Adobe Generative Fill allen Photoshop-Benutzern zugänglich machen, damit jeder schnell Gartenclowns erstellen kann.

Mit einem Adobe-Login und einem webbasierten Tool können Sie Generative Fill auch kostenlos testen, wenn Sie kein Creative Cloud-Abonnement auf der Adobe Firefly- Website haben. Die Warteliste für die Firefly-Beta wurde gerade von Adobe zurückgezogen.