На конференции разработчиков Nvidia представила отличный инструмент искусственного интеллекта, который делает множество 2D-фотографий одной и той же сцены с разных ракурсов, а потом мгновенно преобразует их в трехмерный цифровой рендеринг.

Технология основана на исследованиях Калифорнийского университета в Беркли и компании Google, которые используют нейронные сети для визуализации фотореалистичных 3D-изображений сцен. В качестве источника ИИ использует небольшой набор 2D-кадров под разными углами обзора. 

Инструмент был назван NeRF и по существу оценивает любую информацию о цвете и освещении сцены, отсутствующую во входных данных. После этого ИИ визуализирует 3D-сцену с разрешением 1920 x 1080 пикселей через несколько десятков миллисекунд.

Хотя ранние модели NeRF могли создавать визуализированные сцены за считанные минуты, обучение нейронных сетей занимало значительно больше времени. Разработка Instant NeRF от Nvidia существенно сокращает время как обучения, так и рендеринга и может обучать модель на нескольких десятках неподвижных изображений всего за несколько секунд. 

«Если традиционные 3D-представления, такие как полигональные сетки, похожи на векторные изображения, то работы NeRF подобны растровым изображениям: они плотно фиксируют то, как свет исходит от объекта или внутри сцены. В этом смысле Instant NeRF может использоваться в цифровых камерах, значительно увеличивая скорость, простоту и доступность 3D-съемки», — пояснил вице-президент Nvidia по графическим исследованиям Дэвид Любке. 

Компания Nvidia предполагает, что технология может найти применение в обучении роботов и беспилотных автомобилей, а также для создания контента виртуальной реальности, видеоигр, видеоконференций, цифрового картографирования, архитектуры и развлечений. 

• Телеграм
• Дзен
• Подписывайтесь на наши каналы и первыми узнавайте о главных новостях и важнейших событиях дня.