Шведский исследователь машинного обучения Эмиль Валлнер выпустил бесплатный веб-инструмент под названием Palette.fm , который автоматически раскрашивает черно-белые фотографии с помощью искусственного интеллекта. После загрузки фотографии пользователи могут выбрать цветовой фильтр или уточнить цвета с помощью письменного текстового описания.
Palette.fm использует модель глубокого обучения для классификации изображений, которая определяет исходные предположения о цветах объектов на фотографии или иллюстрации. «Я создал свою собственную модель ИИ, которая использует изображение и текст для создания страницы-раскраски», — написал Валлнер в сообщении для Ars. «Одна модель создает текст, а другая берет изображение и текст для раскрашивания».
Как только вы загрузите изображение, элегантный интерфейс сайта предоставит приблизительную подпись (описание) того, что, по его мнению, он видит на изображении. Если вам не нравится какой-либо из предустановленных цветовых фильтров, вы можете щелкнуть значок карандаша, чтобы самостоятельно отредактировать подпись, которая направляет модель раскрашивания с помощью текстовой подсказки.
Чтобы проверить это, мы сделали фотографию маленькой тыквы и удалили цвет с помощью Photoshop. Затем мы загрузили черно-белую версию и поэкспериментировали с готовыми фильтрами, которые предоставляет Palette.fm. Как только мы нашли хороший фильтр, мы отредактировали заголовок, чтобы уточнить цвета, описывая объекты в сцене. Например, Palette.fm сначала подумал, что тыква — это «коготь», и не распознал тротуар. Но как только мы поместили эти термины в письменную подсказку, цвета стали более понятными. Позже мы улучшили изображение (не показано в примере ниже), добавив «зеленые листья» на задний план.
На данный момент Palette.fm доступен как бесплатный сервис, но Валлнер планирует добавить платную опцию. Сайт обрабатывает изображения онлайн, в облаке. Что касается конфиденциальности загруженных фотографий, на веб-сайте Palette.fm говорится: «Мы не храним ваши изображения». Примечательно, что Palette.fm в настоящее время не требует какой-либо регистрации учетной записи пользователя.
До сих пор Palette.fm очаровал людей на Hacker News , которые использовали этот инструмент для раскрашивания фотографий любимых, исторических фотографий и многого другого. Разновидность технологии раскрашивания Валлнера также была доступна в виде бота в Твиттере с конца прошлого года. Получайте удовольствие раскраски.