Компания Figure.ai представила роботов, управляемых системой Helix, которые впервые продемонстрировали отличную координацию движений в реальном времени, при перекладывании новых объектов, превосходно взаимодействуя в паре.
Helix координирует пространство действий умной машины контролируя все: от отдельных движений пальцев до траекторий конечных эффекторов, взгляда головы и положения туловища. Сбалансированное управление головой и туловищем довольно сложная инженерная задача, ведь их движение непосредственно влияет координацию устройства. Все попытки ученых выровнять их работу до этого, часто приводили к сбоям.

Видео демонстрирует эту координацию в действии: робот плавно отслеживает свои руки головой, одновременно регулируя туловище для оптимального положения в пространстве, при этом сохраняя точный контроль пальцев для захвата объекта.
Ученые утверждают, что ни одна предыдущая система VLA не демонстрировала такой степени координации в реальном времени, сохраняя при этом способность обрабатывать задачи и захватывать предметы.
Впечатляет способность ИИ фактически понимать команды человека, брать предметы со стола, определяя его по описанию. Например, по запросу взять «предмет пустыни», робот выбрал из нескольких предметов, лежащих перед ним на столе — игрушечный кактус.

Также Helix работает с объектами, которые он никогда раньше не видел, используя языковой контекст и другие модели для их правильной идентификации и классификации.

Эксперты полагают, что спрос на подобную технологию будет большим, ведь таких роботов можно использовать почти во всех сферах.
Читайте также нашу статью о том, как китайский робот-гуманоид научился говорить.