ИССЛЕДОВАНИЕ · RESEARCH · #1086
Команда Стэнфорд/Калтех подключила GPT-6 Astra напрямую к Unitree G1 для уборки незнакомой кухни
Исследователи из Стэнфорда и Калтеха создали HomeBody — систему, позволившую роботу Unitree G1 обследовать незнакомую кухню, создать цифровой двойник в Nvidia Isaac Sim и использовать GPT-6 Astra как модель зрения и языка, которая напрямую вызывает библиотеку навыков для захвата, навигации и открытия ящиков, чтобы убирать и приносить предметы. В системе отсутствует обычный обученный слой управления — Astra планирует и самокорректирует шаги с использованием пространственной памяти, но команда отметила практические ограничения: задержки, перегрев сервоприводов пальцев и большие вычислительные затраты; код выложен на GitHub.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- Исследователи из Стэнфорда и Калтеха создали HomeBody — систему, позволившую роботу Unitree G1 обследовать незнакомую кухню, создать цифровой двойник в Nvidia Isaac Sim и использовать GPT-6 Astra как модель зрения и языка, которая напрямую вызывает библиотеку навыков для захвата, навигации и открытия ящиков, чтобы убирать и приносить предметы.
- В системе отсутствует обычный обученный слой управления — Astra планирует и самокорректирует шаги с использованием пространственной памяти, но команда отметила практические ограничения: задержки, перегрев сервоприводов пальцев и большие вычислительные затраты; код выложен на GitHub.
- Это демонстрирует, что мощная языковая модель (GPT-6 Astra) может напрямую управлять роботом без отдельной обученной политики, открывая новые возможности и одновременно выявляя явные проблемы в безопасности, аппаратуре и вычислительных затратах.
ПОЧЕМУ ЭТО ВАЖНО
Это демонстрирует, что мощная языковая модель (GPT-6 Astra) может напрямую управлять роботом без отдельной обученной политики, открывая новые возможности и одновременно выявляя явные проблемы в безопасности, аппаратуре и вычислительных затратах.