Nvidia представила ИИ-модели Cosmos, которая поможет роботам познавать окружающий мир
Читать в полной версииNvidia представила комплект новых моделей искусственного интеллекта, библиотек и прочих средств, предназначенных для обработки информации, которая поступает из внешнего мира — эти инструменты окажутся полезными для создателей робототехники.
Источник изображения: nvidia.com
Наиболее примечательной новинкой стала модель машинного зрения Cosmos Reason с 7 млрд параметров — она предназначена для роботов и других машин с ИИ. С ней роботы и прочие машины получат возможность рассуждать, опираясь на память и знания о физике, а также планировать свои действия.
Cosmos Transfer-2 предназначается для генерации синтетических сцен в 3D-симуляциях; компания также продемонстрировала улучшенную версию первой Cosmos Transfers — её оптимизировали для более быстрой работы. Эти модели предназначаются для создания массивов синтетических обучающих данных: текста, изображения и видео — эти данные можно использовать для обучения роботов и других машин с ИИ.
Nvidia представила новые библиотеки для нейронной реконструкции, в том числе с использованием метода прорисовки — трёхмерного моделирования реального мира на основе данных от сенсоров. Эта функция интегрируется в открытый симулятор CARLA, которым уже пользуются разработчики. Выпущено обновление комплекта для разработчиков (SDK) Omniverse, представлены локальные и облачные серверные решения для рабочих нагрузок, связанных с робототехникой.