Інструмент AI автоматично розфарбовує чорно-білі фотографії

Шведський дослідник машинного навчання Еміль Валлнер випустив безкоштовний веб-інструмент Palette.fm , який автоматично розфарбовує чорно-білі фотографії за допомогою штучного інтелекту. Після завантаження фотографії користувачі можуть вибрати колірний фільтр або уточнити кольори за допомогою письмового текстового опису.

Palette.fm використовує модель глибокого навчання для класифікації зображень, яка визначає базові припущення щодо кольорів об’єктів на фотографії чи ілюстрації. «Я створив власну модель штучного інтелекту, яка використовує зображення та текст для створення розмальовки», — написав Валлнер у дописі для Ars. «Одна модель створює текст, а інша бере зображення та текст для розфарбовування».

Щойно ви завантажите зображення, елегантний інтерфейс сайту надасть приблизний підпис (опис) того, що, на його думку, він бачить на зображенні. Якщо вам не подобається жоден із попередньо встановлених кольорових фільтрів, ви можете клацнути піктограму олівця, щоб самостійно відредагувати підпис, який спрямовує модель розфарбування за допомогою текстової підказки.

Щоб перевірити це, ми сфотографували маленький гарбуз і видалили колір за допомогою Photoshop. Потім ми завантажили чорно-білу версію та поекспериментували з набором готових фільтрів, які пропонує Palette.fm. Коли ми знайшли хороший фільтр, ми відредагували назву, щоб уточнити кольори, описуючи об’єкти сцени. Наприклад, Palette.fm спочатку подумав, що гарбуз — це «кіготь», і не впізнав тротуар. Але як тільки ми ввели ці терміни в письмову підказку, кольори стали більш зрозумілими. Пізніше ми покращили зображення (не показано в прикладі нижче), додавши «зелене листя» на фоні.

Наразі Palette.fm доступний як безкоштовний сервіс, але Wallner планує додати платний варіант. Сайт обробляє зображення онлайн, у хмарі. Стосовно конфіденційності завантажених фотографій веб-сайт Palette.fm зазначає: «Ми не зберігаємо ваші зображення». Але, як і у випадку з будь-яким іншим хмарним сервісом, ставтеся до цього з недовірою, коли справа стосується особистих фотографій. Примітно, що наразі Palette.fm не вимагає жодної реєстрації облікового запису користувача.

Наразі Palette.fm захопив людей на Hacker News , які використовували цей інструмент для розфарбовування фотографій коханих, історичних фотографій тощо. Варіант технології розфарбовування Wallner також доступний як бот у Twitter з кінця минулого року. Розмальовуйте весело.