Две недели назад американская компания Figure AI отказалась от сотрудничества с OpenAI, и вчера продемонстрировала способность своих человекоподобных роботов понимать команды на естественном языке, обрабатываемые VLA-моделью Helix.

Источник изображений: Figure AI

VLA-модель представляет собой комбинацию системы машинного зрения и большой языковой модели, позволяющую обучать роботов различным операциям по комбинации зрительных образов и языковых команд. На практике это приводит к тому, что обучаемые роботы могут по команде манипулировать предметами, которые они ранее никогда не видели. Получая голосовую команду в естественной форме, робот начинает визуально анализировать окружение и потом выполняет поставленную задачу с учётом результатов анализа обстановки.

Модель Helix позволяет роботам Figure работать в паре и взаимодействовать друг с другом при выполнении бытовых операций. Подразумевается, что в быту роботы могут работать парами, помогая друг другу и повышая производительность труда. Figure демонстрирует возможности своих роботов 02 в типичном бытовом интерьере, который традиционно считается очень сложной для роботов средой. Производителям гораздо проще создавать роботов, которые будут работать в более контролируемом и предсказуемом промышленном окружении. Соответственно, появление на рынке «дееспособных» домашних человекоподобных роботов считается более отдалённой перспективой.

Обучение роботов выполнению бытовых операций требует существенных затрат на разработку программного обеспечения или тысяч экспериментов. Запрограммировать их вручную в данном случае не представляется возможным, а потому единственным способом создать помогающих в быту роботов является их самообучение. В домашней среде слишком много переменных, с которыми роботам предстоит столкнуться, поэтому совершенствование профильного ПО потребует существенных затрат времени.

Американская компания Figure по разработке роботов-гуманоидов подписала контракт на их поставку продукции с одной из крупнейших компаний США, а также заявила о намерении выпустить 100 000 таких роботов в течение следующих четырёх лет, сосредоточившись на двух ключевых направлениях — на коммерческом сегменте и на домашнем использовании.

Источник изображения: Figure

По словам генерального директора компании Бретта Эдкока (Brett Adcock), сотрудничество с крупнейшими клиентами позволит Figure производить роботов в больших объёмах, что снизит их себестоимость и ускорит сбор данных для обучения искусственного интеллекта (ИИ). Первым клиентом Figure, о котором было объявлено в декабре, является компания BMW, а имя второго пока держится в секрете, пишет Forbes.

Недавно компания Figure была признана одним из двух лидеров среди 16 ведущих компаний в разработке эффективных и доступных роботов-гуманоидов. Их первый робот Figure 01 был выпущен всего через 31 месяц после основания компании, следующая модель Figure 02 уже поставляется клиентам, а робот Figure 03, представляющий из себя ещё более впечатляющую разработку запущен и работает в лаборатории.

По словам Эдкока, ключевую роль в развитии роботов играет искусственный интеллект. «На прошлой неделе мы начали использовать нейронную сеть для потребностей нового клиента, — отметил он. — Обучение с помощью ИИ является единственным возможным путём, так как написание алгоритмов вручную здесь невозможно». Он также подчеркнул, что одной из главных целей является выполнение роботами задач с высокой скоростью и производительностью. Для сравнения, скорость Figure 01 составляет лишь 17 % от скорости движения человека, тогда как Figure 02 в семь раз быстрее первой модели. Что касается третьей модели, то она окажется ещё быстрее и функциональнее.

Отмечается, что компания в настоящее время не стремится к массовому расширению клиентской базы. Её стратегия заключается в углублении сотрудничества с конкретными крупными клиентами. «В коммерческом секторе наша стратегия заключается в том, чтобы оставаться сосредоточенными на небольшом количестве клиентов, — заявил Адкок. — На раннем этапе для нас более эффективно расти вертикально внутри нескольких клиентов, чем предлагать продукцию многим компаниям».

Хотя Адкок и не назвал второго клиента Figure (первым является BMW), по его словам, «это одна из крупнейших компаний США», из чего можно сделать вывод, что это вполне может быть Walmart, Amazon или Apple, а также крупные компании в сфере здравоохранения, такие как UnitedHealth Group и CVS Health.

Ранее в этом году компания Figure AI представила своего человекоподобного робота второго поколения Figure 02. За несколько месяцев с момента презентации он повысил скорость выполнения задач в 4 раза, а точность его действия при этом возросла в 7 раз. В компании этот прогресс назвали переломным для автономных производственных систем.

Источник изображения: Бретт Адкок / X

Робот Figure 02 тестировался на производственном предприятии BMW в Спартанберге, США. Этот случай стал первым, когда человекоподобный робот был интегрирован в производственную линию автопроизводителя. За время обучения скорость Figure 02 выросла до 1000 одинаковых операций в день, что является важной вехой для человекоподобных роботов, применяемых в промышленности. «Этот показатель будет расти по мере того, как мы будем внедрять больше роботов, собирать больше данных и совершенствовать наши модели искусственного интеллекта», — считает основатель и гендиректор Figure AI Бретт Эдкок (Brett Adcock).

Важную роль играет не только скорость выполнения задач, но и точность действия робота. За время обучения возможности Figure 02 в плане точности существенно возросли, особенно при установке листов металла в пазы шириной менее сантиметра. Эдкок рассказал, что роботу нужно было осуществлять манипуляции с «труднообрабатываемыми деталями из листового металла», избегая столкновений и обеспечивая точную установку деталей. Для соответствия производственным стандартам разработчикам было необходимо сократить цикл выполнения одной операции на 4 минуты. «Пожалуй, это было в 10 раз сложнее, чем любая задача по манипулированию, демонстрируемая нами ранее», - считает Эдкок. Он добавил, что Figure 02 ещё не раскрыл весь свой потенциал и робот далёк от максимально возможной скорости выполнения задач.

Хотя Figure AI огласила результаты первых испытаний, в BMW заявили, что «на заводе BMW Group Plant Spartanburg пока нет роботов Figure AI, и нет определённого графика их появления там». Несмотря на это, возвращение Figure 02 на завод BMW планируется в 2025 году. Помимо BMW разработчик человекоподобных роботов успел заручиться поддержкой других крупных компаний и привлёк в рамках последнего раунда финансирования $675 млн инвестиций. Среди инвесторов были такие компании как OpenAI, Nvidia, Microsoft, а также основатель Amazon Джефф Безос (Jeff Bezos). В настоящее время рыночная стоимость Figure AI оценивается в $2,6 млрд.

Американский стартап Figure показал первые плоды сотрудничества с компанией OpenAI по расширению возможностей гуманоидных роботов. Figure опубликовала новое видео со своим роботом Figure 01, ведущим диалог с человеком в режиме реального времени. Машина на видео отвечает на вопросы и выполняет его команды.

Источник изображения: Figure

Стремительный темп развития проекта Figure 01 и компании Figure в целом не может не впечатлять. Бизнесмен и основатель стартапа Бретт Эдкок (Brett Adcock) «вышел из тени» год назад, после того как компания привлекла внимание крупных игроков на рынке робототехники и технологий искусственного интеллекта, включая Boston Dynamics, Tesla Google DeepMind, Archer Aviation и других, и поставила цель «создать первого в мире коммерчески доступного гуманоидного робота общего назначения».

К октябрю того же года Figure 01 «встал на ноги» и продемонстрировал свои возможности в выполнении базовых автономных задач. К концу всё того же 2023 года робот обрёл возможность обучаться выполнению различных задач. К середине января Figure подписала первый коммерческий контракт на использование Figure 01 на автомобильном заводе компании BMW в североамериканском штата Северная Каролина.

В прошлом месяце Figure опубликовала видео, на котором Figure 01 выполняет работу на складе. Практически сразу после этого компания анонсировала разработку второго поколения машины и объявила о сотрудничестве с OpenAI «по разработке нового поколения ИИ-моделей для гуманоидных роботов». Сегодня Figure поделилась видео, в котором демонстрируются первые результаты этого сотрудничества.

Через свою страницу в X (бывший Twitter) Адкок сообщил, что встроенные в Figure 01 камеры отправляют данные в большую визуально-языковую модель ИИ, обученную OpenAI, в то время как собственные нейросети Figure «также через камеры робота захватывает изображение окружения с частотой 10 Гц». Алгоритмы OpenAI также отвечают за возможность робота понимать человеческую речь, а нейросеть Figure преобразует поток полученной информации в «быстрые, низкоуровневые и ловкие действия робота».

Глава Figure утверждает, что во время демонстрации робот не управлялся дистанционно и видео показано с реальной скоростью. «Наша цель — научить мировую модель ИИ управлять роботами-гуманоидами на уровне миллиардов единиц», — добавил руководитель стартапа. При таком темпе развития проекта ждать осталось не так уж и долго.

Джефф Безос (Jeff Bezos), Amazon, NVIDIA и Microsoft инвестировали в стартап Figure AI, занимающийся созданием человекоподобных роботов. Крупные технологические компании вступили в борьбу за поиск новых сфер применения искусственного интеллекта.

Источник изображения: figure.ai

В последнем раунде финансирования компания Figure AI, ранее поддержанная OpenAI, привлекла $675 млн при оценке в $2 млрд, сообщил аналитик Bloomberg Марк Гурман (Mark Gurman) со ссылкой на анонимный источник. Основатель Amazon Джефф Безос через свою компанию Explore Investments выделил $100 млн; Microsoft инвестировала $95 млн, а NVIDIA и дочерний фонд Amazon предоставили по $50 млн.

Робототехника становится новым рубежом в отрасли ИИ, предполагающим применение передовых технологий для решения насущных задач. Разрабатываемый стартапом робот Figure 01, как считается, сможет выполнять непригодные для человека опасные задачи, а в перспективе робототехника поможет справиться с дефицитом рабочей силы. В раунде финансирования Figure AI приняли участие и другие крупные игроки: венчурное подразделение Intel ($25 млн), LG Innotek ($8,5 млн), инвестиционная группа Samsung ($5 млн), а также OpenAI ($5 млн), которая ранее рассматривала поглощение компании. Из множества венчурных фондов крупнейшие инвестиции поступили от Parkway Venture Capital и Align Ventures — $100 млн и $90 млн соответственно. Первоначально Figure AI рассчитывала на $500 млн, но привлекла $675 млн.

Подписание соглашений с инвесторами и перевод средств намечены на понедельник, 26 февраля, и по мере проработки деталей суммы могут измениться, уточняют источники. Оценка в $2 млрд является предварительной, то есть она не учитывает привлечённые в раунде финансирования средства. В 2022 году Amazon поддержала компанию Agility Robotics — сейчас они совместно испытывают роботов на одном из складов ретейлера.

Американский стартап Figure представил первое видео прогулки человекоподобного робота Figure 01, призванного когда-нибудь заменить людей при выполнении тяжёлой механической работы. Компания стремительно развивает проект, научив робота ходьбе с соблюдением баланса менее чем за один год. На очереди демонстрация работы руками и обучение робота труду грузчика на складе.

Источник изображения: Figure

Прямоходящая модель робота Figure 01 высотой 168 см и массой 60 кг претерпела модификацию в отделке. От показанных ранее матовых прототипов новинка отличается бросающим блики «стальным» корпусом. Компания менее чем за год смогла привлечь в проект инвестиции на сумму $70 млн, $9 млн из которых она получила от компании Intel. Крупнейший мировой чипмейкер надеется не только получить выгоду от использования человекоподобных роботов, но также примет участие в развитии его «интеллекта».

Для перемещения на двух ногах робот Figure 01 использует модель движения, опирающуюся на обучаемые ИИ-алгоритмы, которые отвечают за балансировку всеми конечностями. Роботу задается лишь направление движения без указания чёткой траектории для его отдельных подвижных элементов. В процессе ходьбы алгоритм отдаёт команды шарнирам и суставам, необходимые для соблюдения баланса. В этот процесс вовлечены движения как руками, так и корпусом.

Всего у робота Figure 01 41 степень свободы: по 6 для каждой руки плюс по 7 для ладоней, по 6 для каждой ноги и 3 для талии. А вот голова неподвижна относительно корпуса. Для аккумулятора же предназначен рюкзак.

Для обучения ИИ робота навыкам грузчика компания построила демонстрационный склад. В нынешней модификации робот Figure 01 сможет переносить груз массой до 20 кг. К выполнению погрузочно-разгрузочных работ для заказчиков робот должен приступить в 2024 году, когда компания Figure надеется начать его массовое производство.

Стартап Figure, занимающийся созданием человекоподобных роботов общего назначения, сегодня объявил о получении инвестиций от Intel Capital, инвестиционное подразделение компании Intel, на сумму 9 млн долларов. Это финансирование позволит ускорить разработку человекоподобного робота Figure 01, создать конвейер данных ИИ для его автономной работы и приблизит стартап к коммерциализации.

Источник изображений: figure.ai

Инвестиции Intel Capital являются заметным дополнением к раунду финансирования серии А, в котором участвовали и другие инвесторы, такие как Parkway Venture Capital, Brett Adcock, Aliya Capital, Bold Capital Partners, Tamarack Global, FJ labs и бывший генеральный директор KUKA Robotics Тилл Рейтер (Till Reuter).

Человекоподобный робот Figure 01 несколько месяцев назад вошёл в фазу тестирования и прошёл ряд основных технических этапов под руководством лучшей в своём классе команды инженеров. Наиболее примечательно, что робот сделал свои первые шаги в мае — менее чем через год с момента основания компании. Это знаковое достижение для Figure и один из самых быстрых результатов в истории создания человекоподобных роботов.

«Компания Intel Capital находится в авангарде создания крупных и смелых пограничных инноваций, и мы рады, что разделяем её видение лучшего будущего», — заявил Бретт Адкок (Brett Adcock), основатель и генеральный директор компании Figure. В дополнение к этому, он выразил надежду, что вложенные инвестиции вместе с ресурсами и опытом команды Intel помогут ускорить рост и успех его стартапа.

Фундаментальным отличием Figure 01 от большинства подобных роботов являются алгоритмы управления на базе ИИ. С течением времени они позволяют роботу обучаться и совершенствовать свои функции, что делает его более универсальным. Предполагается, что в будущем это позволит Figure 01 перейти от основных задач, таких как подъём и перенос грузов, к более сложным. Такой робот сможет выполнять трудоёмкую работу, недоступную для человека.

«Intel Capital постоянно ищет компании, которые расширяют границы инноваций, и мы уверены, что Figure обладает потенциалом, способным изменить представление мира об ИИ, — сказал Марк Лайдон (Mark Lydon), управляющий директор Intel Capital. — Ориентация Figure на развитие экономики труда является важной частью нашего будущего, и мы надеемся быть в авангарде поддержки развития человекоподобных роботов».

Стартап Figure, при поддержке Intel Capital, вносит значительный вклад в развитие робототехники и ИИ. Их взаимодействие обеспечивает новые возможности для разработки и коммерциализации прорывных технологий. При всей сложности и амбициозности данного проекта, поддержка со стороны Intel Capital помогает обеспечить его устойчивое развитие и прогресс в данной области.