Ожидается, что новое решение позволит качественно реконструировать тёмные сцены, оставляя лишь минимальные артефакты, и оно будет намного эффективнее, чем существующие сегодня решения.
Элементы искусственного интеллекта при обработке фотографий применяется уже давно, особенно в смартфонах и программном обеспечении для обработки фото после съёмки. Возможность качественного устранения шума на фото — одна из самых востребованных функций, поскольку даже лучшие сенсоры не могут снимать полностью без артефактов, особенно при недостатке освещения.
Представленная Google Research технология позволяет фотографам «видеть в темноте». Новый инструмент RawNeRF является частью проекта с открытым кодом MultiNeRF. Он будет особенно полезен тем, кто станет снимать тёмные сцены — это можно будет делать с минимальной потерей качества.
Технология NeRF (Neural Radiance Fields) представляет собой синтезатор, способный сканировать многочисленные RAW-изображения и воздавать точный 3D-рендер. По данным Google, технология RawNeRF способна объединять снимки, сделанные с разных ракурсов, для устранения шума и реконструкции сцены. Может меняться экспозиция, отображение тонов и фокусировка.
Для демонстрации возможностей RawNeRF используется сделанное на смартфон фото. Примечательно, что при обработке используются алгоритмы ИИ, «натренированные» не на уже прошедших обработку JPEG, а на RAW-контенте.
Появление новой технологии в смартфонах и камерах может действительно поменять «правила игры» как в среде профессиональных фотографов, так и среди любителей со смартфонами. Как утверждает издание Techspot, пока на рынке отсутствуют инструменты устранения шумов, способны обеспечить сопоставимое качество изображения.