Narzędzie AI automatycznie koloruje czarno-białe zdjęcia

Szwedzki badacz uczenia maszynowego, Emil Wallner, udostępnił bezpłatne narzędzie internetowe o nazwie Palette.fm , które automatycznie koloruje czarno-białe zdjęcia przy użyciu sztucznej inteligencji. Po przesłaniu zdjęcia użytkownicy mogą wybrać filtr kolorów lub udoskonalić kolory za pomocą pisemnego opisu tekstowego.

Palette.fm wykorzystuje model głębokiego uczenia się do klasyfikacji obrazów, który określa podstawowe domysły dotyczące kolorów obiektów na zdjęciu lub ilustracji. „Stworzyłem własny model AI, który wykorzystuje obraz i tekst do stworzenia strony do kolorowania” – napisał Wallner w poście dla Ars. „Jeden model tworzy tekst, podczas gdy drugi pobiera obraz i tekst do pokolorowania”.

Po przesłaniu obrazu elegancki interfejs witryny poda przybliżony podpis (opis) tego, co myśli, że widzi na obrazie. Jeśli nie podoba Ci się żaden z gotowych filtrów kolorów, możesz kliknąć ikonę ołówka, aby samodzielnie edytować podpis, który prowadzi model kolorowania za pomocą podpowiedzi tekstowej.

Aby to przetestować, zrobiliśmy zdjęcie małej dyni i usunęliśmy kolor za pomocą Photoshopa. Następnie pobraliśmy wersję czarno-białą i poeksperymentowaliśmy z wyborem gotowych filtrów, które zapewnia Palette.fm. Po znalezieniu dobrego filtra dokonaliśmy edycji tytułu, aby udoskonalić kolory, opisując obiekty w scenie. Na przykład Palette.fm początkowo myślał, że dynia to „pazur” i nie rozpoznał chodnika. Ale kiedy umieściliśmy te warunki w pisemnej podpowiedzi, kolory stały się bardziej zrozumiałe. Później poprawiliśmy obraz (nie pokazany w poniższym przykładzie), dodając „zielone liście” w tle.

Na razie Palette.fm jest dostępny jako usługa bezpłatna, ale Wallner planuje dodać płatną opcję. Witryna przetwarza obrazy online, w chmurze. Jeśli chodzi o prywatność przesłanych zdjęć, witryna Palette.fm stwierdza: „Nie przechowujemy twoich zdjęć”. Ale, podobnie jak w przypadku każdej usługi w chmurze, podejdź do tego z przymrużeniem oka, jeśli chodzi o zdjęcia osobiste. Warto zauważyć, że Palette.fm obecnie nie wymaga żadnej rejestracji konta użytkownika.

Jak dotąd Palette.fm zafascynowało ludzi z Hacker News , którzy używali tego narzędzia do kolorowania zdjęć bliskich, zdjęć historycznych i nie tylko. Odmiana technologii kolorowania Wallnera jest również dostępna jako bot na Twitterze od końca zeszłego roku. Baw się kolorując.