ИИ NVIDIA создает 3D-сцены из 2D-фотографий

NVIDIA представила новое исследование, в котором показан алгоритм ИИ, способный воссоздать 3D сцену из небольшой коллекции 2D объектов за несколько секунд с помощью новой техники под названием нейронные поля сияния (NeRFs). Для реконструкции сцены NeRF требуется несколько десятков снимков, сделанных с разных позиций, а также положение камеры на каждом из этих снимков. Затем ИИ может реконструировать недостающие участки, предсказывая цвет света, излучаемого в любом направлении из любой точки трехмерного пространства.

Дэвид Любке (David Luebke), вице-президент по графическим исследованиям в NVIDIA, объясняет, что «если традиционные 3D представления, такие как полигональные сетки, похожи на векторные изображения, то NeRF похожи на растровые изображения: они плотно фиксируют то, как свет излучается от объекта или внутри сцены. В этом смысле Instant NeRF может стать таким же важным для 3D, как цифровые камеры и JPEG сжатие для 2D фотографии — значительно увеличивая скорость, простоту и охват 3D съемки и обмена».

Узнайте больше в блоге NVIDIA.