Nvidia рассказала о технологии Instant NeRF, позволяющей за секунды превращать несколько статичных изображений в цифровые трёхмерные сцены.
Источник изображения: NVIDIA
Neural Radiance Fields (NeRF) — технология преобразования нескольких изображений объекта с разных ракурсов в трёхмерную модель с помощью нейросети. Однако подобные модели крайне требовательны к вычислительным мощностям. Проект Nvidia призван это изменить. Instant NeRF использует ускоренный ИИ-моделью обратный рендеринг, благодаря чему сцена получает реалистичное освещение. Чем дольше обучается ИИ модель, тем более детализированные сцены она создаёт.
Но главное, что благодаря технологии RTX использование NeRF станет доступным для рядовых пользователей ПК и ноутбуков. Несмотря на то, что время обработки сцены зависит от множества факторов, для тренировки ИИ больше не требуется серверное оборудование. По словам компании, рабочие станции с Nvidia RTX и ПК GeForce RTX прекрасно подойдут для работы с NeRF.
Разработчики и технические энтузиасты могут скачать исходный код и скомпилировать самостоятельно, обычным же пользователям предлагается загрузить установщик Instant-NGP для Windows. Уже сейчас доступны подробные руководства по работе с Instant NeRF, графическому интерфейсу, оптимизации параметров сцены и созданию анимаций.
Однако технология позволяет не только создавать трёхмерные сцены, но и с помощью VR-технологий побывать в них, свободно перемещаясь в пространстве. Возможные применения напрашиваются сами собой: например, риэлтор может отснять фотографии объекта, а затем устроить виртуальный показ в трёхмерном пространстве; ИИ может создавать из фотографий товаров реалистичные трёхмерные модели для онлайн-магазинов.