Американские учёные из Калифорнийского университета научили нейросеть окрашивать монохромные фотографии с приборов ночного видения в естественные цвета. Исследование опубликовано в журнале PLOS ONE.
Приборы ночного видения преобразуют инфракрасное излучение в видимый свет, но способны выдавать исключительно монохромное изображение. Исследователи использовали камеру, которая может улавливать как видимый свет, так и инфракрасную часть спектра, чтобы сопоставить изображения в разных длинах волн.
Затем они обучили нейросеть обнаруживать связь между тем, как объекты выглядят в инфракрасном диапазоне, и их «естественным» цветом — в видимом спектре. После обучения она смогла предсказывать окраску объектов исключительно по инфракрасным изображениям, даже если они были сняты в полной темноте. Пока возможности нейросети ограничены лишь изображениями лиц, поскольку она обучена на портретах.
Что касается других объектов, то, как отмечают учёные, они тоже вполне по силам нейросети — конечно, при условии соответствующего обучения. Со временем этот подход позволит выдавать чрезвычайно точные цветные изображения тех или иных объектов, утверждают разработчики.