Новая технология NVIDIA умеет быстро превращать 2D-снимки в 3D-объекты

Об этом NVIDIA рассказала в своём блоге.

• Представители компании напомнили, что 75 лет назад камера Polaroid впервые в истории моментально запечатлела трёхмерный мир на двухмерном фото. А нейронная сеть Instant NeRF делает обратное — за несколько секунд она превращает 2D-изображения в полноценные 3D-сцены.
• Процесс создания 3D-изображения инженеры NVIDIA назвали инверсным рендерингом — алгоритм использует ИИ для аппроксимации поведения освещения, позволяя пользователю за несколько секунд воссоздать трёхмерную сцену из нескольких десятков двухмерных изображений, которые демонстрируют объект под разными углами.
• Инженеры отмечают, что сейчас нейронная сеть лучше всего обрабатывает один объект в кадре. Если необходимо передать в 3D несколько предметов, нужно, чтобы они медленно двигались или стояли на месте, и таким образом получится избежать размытия.
• Воссоздаваемые в Instant NeRF трёхмерные объекты можно использовать для создания игр — это сильно упростит деятельность геймдев-специалистов. Инженеры NVIDIA отметили, что технологию удобно применять для разработки 3D-аватаров участников видеоконференции, а также в роботостроении, для воссоздания 3D-карт и во многих других сферах.
• Вице-президент по исследованиям графики NVIDIA Дэвид Любке уверен, что у Instant NeRF есть все шансы стать такой же важной технологией для обработки 3D, какой в своё время стали цифровые камеры и метод сжатия JPEG для 2D-фотографий и изображений.
• NVIDIA воссоздала одну из легендарных фотографий Энди Уорхола в 3D-формате с помощью Instant NeRF. Таким образом компания отдала дань уважения наследию Polaroid.

В конце января издание Bloomberg со ссылкой на источники заявило, что NVIDIA планирует отказаться от приобретения британского производителя полупроводников — компании Arm.