Шведський дослідник машинного навчання Еміль Вальнер випустив безплатний вебінструмент під назвою Palette.fm, який автоматично розфарбовує чорно-білі фотографії за допомогою штучного інтелекту (ШІ). Після завантаження фотографії користувачі можуть вибрати колірний фільтр або уточнити кольори за допомогою текстового опису.
Palette.fm використовує модель глибокого навчання для класифікації зображень, яка керує його початковими здогадками про кольори об’єктів на фотографії або ілюстрації. Вальнер, який працює над колоризацією за допомогою ШІ вже п’ять років, не став розповідати детальніше, яка технологія забезпечує роботу сайту. «Я створив власну модель штучного інтелекту, яка використовує зображення і текст для генерації колористики. Одна модель створює текст, а інша бере зображення і текст для генерації кольору», – заявив дослідник.
Після того, як ви завантажуєте зображення, інтерфейс сайту робить приблизний опис того, що, на його думку, він бачить на картинці. Якщо жоден з попередньо встановлених колірних фільтрів не подобається, можна натиснути на іконку олівця, щоб відредагувати підпис, який керує моделлю колоризації за допомогою текстової підказки.
Теж цікаво:
Для тестування використана фотографія маленького гарбуза – за допомогою Photoshop з неї видалили кольори, потім завантажили чорно-білу версію і поекспериментували з вибором готових фільтрів, які пропонує Palette.fm. Після цього довелося відредагувати підпис, щоб уточнити кольори, які мають об’єкти на фото. Наприклад, спочатку Palette.fm думав, що гарбуз – це «кіготь», і не розпізнавав тротуар. Але після того, як уточнення додали в письмову підказку, кольори стали зрозумілішими. Чим детальніше опис, тим краще результат.
Наразі Palette.fm доступний як безплатний сервіс, але Вальнер планує додати платну опцію. Сайт обробляє зображення онлайн, у хмарі. Що стосується конфіденційності завантажених фотографій, то на сайті Palette.fm сказано: «Ми не зберігаємо ваші зображення». Але, як і у випадку з будь-яким хмарним сервісом, сприймайте це з долею скептицизму. Приємно відзначити, що на цей час Palette.fm не вимагає ніякої реєстрації облікового запису користувача.
Palette.fm викликав резонанс – люди активно використовують наразі безплатний інструмент для розфарбовування світлин родичів та історичних фотографій. Варіація технології розфарбовування Вальнера також доступна у вигляді бота в Twitter з кінця минулого року.
Ви можете допомогти Україні боротися з російськими окупантами. Найкращий спосіб зробити це – пожертвувати кошти Збройним Силам України через Savelife або через офіційну сторінку НБУ.
Також цікаво: