Google создал нейросеть, которая убирает шумы с фотографий

Особенно со снимков, сделанных в тёмное время суток.

Дмитрий Зверев

Любитель научной фантастики и технологического прогресса. Хорошо сочетает в себе заумного технаря и утончённого гуманитария. Пишет про IT и радуется этому.

Что случилось

Инженеры из Google показали нейросеть RawNeRF на конференции CVPR 2022. Она умеет убирать дефекты и восстанавливать изображения. В компании нейросеть хотят использовать в первую очередь для фотографий, сделанных вечером или ночью. А в будущем инженеры хотят встроить её в смартфоны.

Изображение до. Источник: 9to5google.com

Изображение после. Источник: 9to5google.com

Зачем нужна эта нейросеть

Она умеет обрабатывать изображения и оставлять их в исходном разрешении, но без дефектов. Сотрудники компании Google говорят, что нейросеть восстанавливает весь снимок, а не только участки с шумами.

RawNeRF работает с RAW-файлами и умеет распознавать объекты на фотографии. Например, она различает дорожные знаки и может подсвечивать на них важную информацию.

Вот так нейросеть работает с объектами. Источник: 9to5google.com

Кроме этого, RawNeRF умеет создавать 3D-сцены из серии снимков. Работает эта функция по аналогии с нейросетью от NVIDIA — Instant NeRF.

Как нейросеть обрабатывает изображения и делает 3D-сцены. Источник: 9to5google.com

Что дальше

В будущем эта технология появится в смартфонах Google и, скорее всего, в операционной системе Android. Когда — в компании не уточняют. Однако разработчики нейросети рассчитывают, что в будущем такие алгоритмы будут распространены на мобильных устройствах и позволят повысить качество съёмки в тёмное время суток.

Читайте также: