TU Graz розробив алгоритм на основі штучного інтелекту, який реалістично розфарбовує чорно-білі зображення. Це особливо цікаво для відновлення історичних записів.
Що трапилося
Команда інженерів-комп’ютерників з Технологічного університету Граца (TU Graz) разом із компанією HS-Art, що спеціалізується на реставрації історичних фільмів, розробили інтегрований програмний застосунок. Він поєднує інтерактивні та автоматизовані методи фарбування з технологіями глибокого навчання, які здатні автоматично генерувати колір для чорно-білих фільмів.
Проєкт RE:Color
Проєкт, що отримав назву «RE:Color: Ефективне розфарбовування фільмів у кінематографічній якості на основі нових методів машинного навчання», мав на меті розробку ефективної технології розфарбовування чорно-білих фільмів з якомога меншою участю користувача, зі збереженням автентичних кольорів.
Підписуйтесь на Mediasat в Telegram: тут найцікавіші новини зі світу технологій
Алгоритм
Алгоритм був розроблений для створення переважно автоматичного, але повністю контрольованого користувачем процесу фарбування. Нейронні мережі попередньо навчені, щоб запропонувати найкращі кольорові результати, але для точного фарбування необхідною є участь людини. Користувач визначає колір для кадру фільму, а потім програмне забезпечення береться за розфарбовування наступних кадрів.
Реалістичне забарвлення та автентичний цифровий шум зображення
Програмне забезпечення генерує колір для фільмів з найбільшою ефективністю, з якомога меншою участю людини. Розробники додали штучний шум для відновлення та забарвлення, аби створити більш вірогідне враження для глядачів.
Результат
Застосунок «Diamant film colorizer» було використано під час підготовки документального серіалу ZDFzeit «Влада Гітлера», щоб розфарбувати історичні кадри максимально близько до оригіналу.
Ключовий алгоритм був офіційно представлений на великому міжнародному симпозіумі, а вихідний код є у вільному доступі. Для ефективного використання необхідне програмне забезпечення на його основі, яке було розроблено партнером проєкту HS-Art і наявне в їхньому портфелі продуктів.