AI-tool kleurt zwart-witfoto’s automatisch in

De Zweedse machine learning-onderzoeker Emil Wallner heeft een gratis webtool genaamd Palette.fm uitgebracht die automatisch zwart-witfoto’s inkleurt met behulp van kunstmatige intelligentie. Zodra de foto is geüpload, kunnen gebruikers een kleurenfilter selecteren of de kleuren verfijnen met een geschreven tekstbeschrijving.

Palette.fm gebruikt een deep learning-model voor beeldclassificatie dat basisinschattingen over de kleuren van objecten in een foto of illustratie bepaalt. “Ik heb mijn eigen AI-model gemaakt dat een afbeelding en tekst gebruikt om een ​​kleurpagina te maken”, schreef Wallner in een bericht aan Ars. “Het ene model maakt de tekst, het andere neemt de afbeelding en tekst om in te kleuren.”

Zodra u een afbeelding uploadt, geeft de elegante interface van de site een ruw bijschrift (beschrijving) van wat de site denkt te zien in de afbeelding. Als u geen van de vooraf ingestelde kleurfilters leuk vindt, kunt u op het potloodpictogram klikken om het bijschrift zelf te bewerken, dat het inkleuringsmodel begeleidt met een teksthint.

Om dit te testen, hebben we een foto gemaakt van een kleine pompoen en de kleur verwijderd met Photoshop. Vervolgens hebben we de zwart-witversie gedownload en geëxperimenteerd met een selectie van kant-en-klare filters die Palette.fm biedt. Nadat we een goed filter hadden gevonden, hebben we de titel bewerkt om de kleuren te verfijnen door de objecten in de scène te beschrijven. Zo dacht Palette.fm aanvankelijk dat de pompoen een “klauw” was en herkende het trottoir niet. Maar toen we die termen eenmaal in de geschreven prompt hadden gezet, werden de kleuren begrijpelijker. We hebben de afbeelding later verbeterd (niet weergegeven in het onderstaande voorbeeld) door “groene bladeren” op de achtergrond toe te voegen.

Voorlopig is Palette.fm beschikbaar als gratis service, maar Wallner is van plan een betaalde optie toe te voegen. De site verwerkt beelden online, in de cloud. Met betrekking tot de privacy van geüploade foto’s zegt de Palette.fm-website: “We slaan uw afbeeldingen niet op.” Maar neem dit, zoals bij elke cloudservice, met een korreltje zout als het om persoonlijke foto’s gaat. Met name vereist Palette.fm momenteel geen enkele vorm van registratie van een gebruikersaccount.

Tot nu toe heeft Palette.fm mensen gefascineerd op Hacker News die de tool hebben gebruikt om foto’s van dierbaren, historische foto’s en meer in te kleuren. Sinds eind vorig jaar is een variant van de inkleuringstechnologie van Wallner ook beschikbaar als bot op Twitter . Veel kleurplezier.