Две недели назад американская компания Figure AI отказалась от сотрудничества с OpenAI, и вчера продемонстрировала способность своих человекоподобных роботов понимать команды на естественном языке, обрабатываемые VLA-моделью Helix.

Источник изображений: Figure AI

VLA-модель представляет собой комбинацию системы машинного зрения и большой языковой модели, позволяющую обучать роботов различным операциям по комбинации зрительных образов и языковых команд. На практике это приводит к тому, что обучаемые роботы могут по команде манипулировать предметами, которые они ранее никогда не видели. Получая голосовую команду в естественной форме, робот начинает визуально анализировать окружение и потом выполняет поставленную задачу с учётом результатов анализа обстановки.

Модель Helix позволяет роботам Figure работать в паре и взаимодействовать друг с другом при выполнении бытовых операций. Подразумевается, что в быту роботы могут работать парами, помогая друг другу и повышая производительность труда. Figure демонстрирует возможности своих роботов 02 в типичном бытовом интерьере, который традиционно считается очень сложной для роботов средой. Производителям гораздо проще создавать роботов, которые будут работать в более контролируемом и предсказуемом промышленном окружении. Соответственно, появление на рынке «дееспособных» домашних человекоподобных роботов считается более отдалённой перспективой.

Обучение роботов выполнению бытовых операций требует существенных затрат на разработку программного обеспечения или тысяч экспериментов. Запрограммировать их вручную в данном случае не представляется возможным, а потому единственным способом создать помогающих в быту роботов является их самообучение. В домашней среде слишком много переменных, с которыми роботам предстоит столкнуться, поэтому совершенствование профильного ПО потребует существенных затрат времени.

Ранее в этом году компания Figure AI представила своего человекоподобного робота второго поколения Figure 02. За несколько месяцев с момента презентации он повысил скорость выполнения задач в 4 раза, а точность его действия при этом возросла в 7 раз. В компании этот прогресс назвали переломным для автономных производственных систем.

Источник изображения: Бретт Адкок / X

Робот Figure 02 тестировался на производственном предприятии BMW в Спартанберге, США. Этот случай стал первым, когда человекоподобный робот был интегрирован в производственную линию автопроизводителя. За время обучения скорость Figure 02 выросла до 1000 одинаковых операций в день, что является важной вехой для человекоподобных роботов, применяемых в промышленности. «Этот показатель будет расти по мере того, как мы будем внедрять больше роботов, собирать больше данных и совершенствовать наши модели искусственного интеллекта», — считает основатель и гендиректор Figure AI Бретт Эдкок (Brett Adcock).

Важную роль играет не только скорость выполнения задач, но и точность действия робота. За время обучения возможности Figure 02 в плане точности существенно возросли, особенно при установке листов металла в пазы шириной менее сантиметра. Эдкок рассказал, что роботу нужно было осуществлять манипуляции с «труднообрабатываемыми деталями из листового металла», избегая столкновений и обеспечивая точную установку деталей. Для соответствия производственным стандартам разработчикам было необходимо сократить цикл выполнения одной операции на 4 минуты. «Пожалуй, это было в 10 раз сложнее, чем любая задача по манипулированию, демонстрируемая нами ранее», - считает Эдкок. Он добавил, что Figure 02 ещё не раскрыл весь свой потенциал и робот далёк от максимально возможной скорости выполнения задач.

Хотя Figure AI огласила результаты первых испытаний, в BMW заявили, что «на заводе BMW Group Plant Spartanburg пока нет роботов Figure AI, и нет определённого графика их появления там». Несмотря на это, возвращение Figure 02 на завод BMW планируется в 2025 году. Помимо BMW разработчик человекоподобных роботов успел заручиться поддержкой других крупных компаний и привлёк в рамках последнего раунда финансирования $675 млн инвестиций. Среди инвесторов были такие компании как OpenAI, Nvidia, Microsoft, а также основатель Amazon Джефф Безос (Jeff Bezos). В настоящее время рыночная стоимость Figure AI оценивается в $2,6 млрд.