HomeBody управляет гуманоидом Unitree G1 через GPT-6 Astra

27 сентября команда Movement Lab Стэнфордского университета наряду с коллегами из Caltech опубликовала HomeBody — систему, где универсальная мультимодальная схема GPT-6 Astra от OpenAI напрямую управляет гуманоидом Unitree G1. Само действие происходит в незнакомой кухне, без обучения под конкретное помещение. 

Платформа отвечает на вопрос, на который индустрия робототехники потратила миллиарды долларов: нужна ли вообще отдельная обученная схема «зрение–язык–действие» (VLA) между умной моделью и моторами. Для многих задач, судя по результатам, она уже не обязательна. Но тут есть ряд серьезных оговорок.

Как устроена система

Классический стек выглядит так: языковая схема планирует, VLA-политика переводит план в движения, низкоуровневый контроллер крутит моторы. HomeBody убирает средний слой. GPT-6 Astra вызывает библиотеку из пяти готовых навыков — навигация, взять предмет, положить, открыть ящик, достать из ящика. 

Робот сам исследует помещение и строит его цифрового двойника в NVIDIA Isaac Sim по данным собственных камер, SLAM-карты и положений суставов. Эта пространственная память даёт возможность помнить, где лежат предметы, даже когда они вне поля зрения. Мелкие промахи исправляются визуальным сервоуправлением и ограниченными локальными повторами, без нового обращения к модели.

Перцепция и планирование движений работают на ноутбуке Razer Blade с RTX 4090, а сама Astra — удаленно в облаке OpenAI. Авторы работы давно работают на стыке компьютерной графики, симуляции движений и робототехники, так что это вполне логичный шаг развития идеи.

Почему это сделали именно сейчас

GPT-6 Astra вышла 3–4 сентября, и OpenAI позиционирует ее как схема с сильным компьютерным зрением и пространственным мышлением. HomeBody выглядит одной из первых серьезных проверок этих заявлений на физическом железе. Раньше схема уже засветилась в любительских тестах на вождение и сборку мебели IKEA, но гуманоид в незнакомом доме — задача сложнее. И ближе к тому, что индустрия называет восстанием ИИ embodied AI.

Слабые места

Самое важное ограничение — цифры. На странице проекта нет ни процента успешных попыток, ни числа прогонов, ни времени выполнения задач. Есть только демонстрации и описание архитектуры. Для исследовательской публикации этого достаточно, а для вывода «VLA больше не нужны» — маловато. Авторы сами называют узкие места: паузы между действиями в связи с задержки Astra, перегрев сервоприводов пальцев, время и стоимость программный оболочку на построение цифрового двойника.

Для сравнения, Figure заявила 17 сентября, что ее Helix 2.5 без адаптации под конкретную среду обобщается на 30 незнакомых домов, а успешность выросла с 9% до 56% за счёт претрейну на датасете Index — с HomeBody их разделяет около десяти дней.

Что это значит

Дальше рынок, вероятно, расколется. В медленных бытовых сценариях выигрывает связка «фундаментальная схема плюс набор модулей навыков». Она дешевле в разработке и сразу получает прирост от каждой новой версии модели. В быстрых и задачах вроде сборки на конвейере или ловли предметов VLA-политики никуда не денутся. 

Самое неудобное в этой ситуации — это то, что OpenAI на этой неделе приостановила свои самые мощные модели в связи с непредсказуемых действий агентов. А доверять модели такого класса физическое тело в чужом доме выглядит смелым решением. Терминатор, к счастью, начинался не с уборки кухни, а Skynet — с оборонного контракта, так что до восстания машин путь пока неблизкий. Но вопрос безопасности embodied-агентов, подозреваю, скоро станет таким же острым, каким некоторое количество лет назад стал вопрос песочниц для языковых моделей.

ИИ‑роутер — доступ к 300+ моделям из одной панели

Подключите OpenAI‑совместимый шлюз по единому api‑ключу. Настраивайте сквозную аналитику, отслеживайте лимиты и квотируйте ресурсы.

Запустить ИИ‑роутер →