Сегодня 15 июня 2025
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

Apple представила ИИ, который создаёт 3D-объекты и сцены всего из трёх фото

Команда Apple по машинному обучению совместно с исследователями из Нанкинского университета и Гонконгского университета науки и технологий разработала 3D-ИИ-модель Matrix3D, с помощью которой можно воссоздавать 3D-объекты и сцены на основе всего нескольких 2D-фотографий.

 Источник изображения: 9to5mac.com

Источник изображения: 9to5mac.com

Matrix3D относится к категории больших фотограмметрических моделей (Large Photogrammetry Model). Фотограмметрия использует фотографии для получения информации об объектах и проведения измерений для создания 3D-моделей или карт. В настоящее время этот процесс включает использование различных моделей для оценки позы и прогнозирование глубины, что может привести к неточностям.

Matrix3D позволяет выполнить эти операции за один раз. Она принимает к учёту изображения, параметры камеры (такие, как угол и фокусное расстояние), данные о глубине и обрабатывает их с помощью единой архитектуры. Это не только упрощает процесс, но и повышает точность.

Для обучения Matrix3D использовалась стратегия маскированного обучения, в рамках которого исследователи скрывали часть данных, что заставило модель научиться заполнять пробелы. Этот метод является ключевым, поскольку он позволяет проводить эффективное обучение модели даже с меньшими или неполными наборами данных.

В результате, имея всего три входных изображения, Matrix3D может генерировать подробные 3D-реконструкции объектов и даже целых сред, что могло бы найти применение в иммерсивных гарнитурах, таких как Apple Vision Pro.

Исследователи разместили исходный код Matrix3D на GitHub. Они также создали веб-сайт, на котором можно более подробно ознакомиться с возможностями новой ИИ-модели.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Передовая 332-слойная флеш-память Kioxia предложит кристаллы той же ёмкости, что и 218-слойная 3 ч.
Infinix представила смартфоны Smart 10 Plus, Smart 10 HD и Smart 10 по цене меньше $100 7 ч.
Власти США намерены надавить на союзников с целью синхронизации санкций против Китая 11 ч.
Тайвань наложил экспортные ограничения на китайские компании Huawei и SMIC 12 ч.
Администрация Трампа решила разобраться в госконтрактах со SpaceX, чтобы узнать, как лишить Маска финансирования 21 ч.
AMD представила Pensando Pollara 400 — первую 400-Гбит/с сетевую карту стандарта Ultra Ethernet 22 ч.
Asus ROG Astral GeForce RTX 5090 Dhahab Edition с автографом Дженсена Хуанга продали на аукционе за $24 200 22 ч.
Китайские учёные изготовили уникальный радиотелескоп для исследования тёмной энергии 23 ч.
Тайвань отправил в тюрьму капитана китайского судна, обвинив его в умышленном повреждении подводного кабеля 23 ч.
Intel выпустит недорогой шестиядерник Core 5 120F для платформы LGA 1700 23 ч.