Технология обработки статичных фото NeRF-W была создана на базе предыдущей работы разработчиков Google — NeRF.
NeRF умела делать почти то же самое, но была придирчива к качеству фото. Требовались вполне определенные ракурсы, ей не подходили фотографии, сделанные обычными людьми, где часто попадались сторонние объекты, размазанные участки и артефакты. Т.е. NeRF была придирчива к качеству снимков, хотя также использовала нейросети и прямой 3d-рендеринг.
Разные фотографы могли сделать снимки одного и того же здания, но не каждый снимок алгоритм мог правильно воспринять и обработать нужным образом.
NeRF-W обзавелась независимостью от статичного мира фотоснимков. Детальная постобработка и коррекция освещения объекта строит низкополигональную проекцию, что позволяет осветить сцену иначе, чем в исходных фотографиях.
Новая программа позволяет пренебрегать случайными объектами на снимках — прохожих, машины, провода, адаптирует фон и экспозицию фотографий друг к другу.
Возможности технологии NeRF-W разработчики наглядно продемонстрировали, смоделировав одни из самых известных исторических достопримечательностей по подборке рандомных фото из интернета: фонтана Треви, Бранденбургских ворот, базилики Сакре-Kёр.
Искусственный интеллект системы продолжают дорабатывать, чтобы в последствии она могла прийти на смартфоны рядовых пользователей.
Таким образом можно будет получать детальные трехмерные локации, которые можно будет рассмотреть с различных ракурсов, выбирая собственную точку обзора и направление освещения.
Сообщение Google доработали технологию NeRF-W превращения случайных статичных фотоснимков из интернета в объёмные 3D-локации появились сначала на Информационно-аналитическое издание SM.News.