Nvidia рассказала на конференции GDC 2024, как партнёры применяют её технологии в области искусственного интеллекта для создания реалистичных цифровых воплощений человека в профессиональной деятельности и для игровых приложений. Наиболее востребованными решениями являются Nvidia ACE (Avatar Cloud Engine) для генерации речи и анимации, Nvidia NeMo для генерации реплик и Nvidia RTX для прорисовки с трассировкой лучей.
Источник изображения: blogs.nvidia.com
Inworld AI продемонстрировала разработанную при поддержке Nvidia игру Covert Protocol, в которой геймер может почувствовать себя опытным частным детективном — здесь расширены возможности взаимодействия с неигровыми персонажами. В проекте использован инструмент Inworld Engine, объединяющий системы познания, восприятия и поведения — это помогает сформировать повествование в игре, — а также средства создания игровой среды с визуализацией при помощи RTX. В игре также применяются технология распознавания речи Nvidia Riva и микросервисы Nvidia Audio2Face.
Цифровая платформа UneeQ, специализирующаяся на создании 3D-аватаров на базе ИИ для корпоративных приложений, также внедрила микросервис Nvidia Audio2Face и объединила его с собственной технологией Synanim ML. Это повысило реалистичность генерируемых ИИ аватаров, а заказчики UneeQ повысили качество обслуживания собственных клиентов.
Nvidia также рассказала о технологии Neural Radiance Cache (NRC) — это основанный на ИИ алгоритм трассировки лучей, направленный на обработку непрямых источников света в динамичных сценах без потребности предварительной обработки статического освещения с учётом геометрии и материалов. Технология Nvidia Spatial Hash Radiance Cache (ShaRC) предлагает те же возможности, но без использования нейросети с совместимостью с любым графическим процессором с поддержкой трассировки лучей в DirectX или Vulkan.
Наконец, Nvidia сообщила, что вскоре расширится число игр с поддержкой технологии масштабирования DLSS 3.5, главным преимуществом которой является решение Ray Reconstruction — реконструкция трассировки лучей взамен стандартных алгоритмов шумоподавления. Поддержка DLSS 3.5 появится в Black Myth: Wukong и Naraka: Bladepoint; она уже есть в Portal with RTX, а скоро появится и в бета-версии платформы Nvidia RTX Remix, позволяющей добавлять трассировку лучей в классические игры.