GPT-6赋能宇树G1,机器人厨房任务实现分层控制新突破

斯坦福与加州理工联合开发的HomeBody项目,通过将GPT Astra接入宇树G1人形机器人,实现了在陌生厨房环境中自主探索、记忆空间并完成复杂家务任务的能力。该系统采用分层接口设计,让大模型专注于...

人工智能

近日,斯坦福大学The Movement Lab与加州理工学院共同推出了一项名为HomeBody的研究项目,该项目成功将GPT Astra语言模型接入宇树G1人形机器人,使其能够在完全陌生的厨房环境中自主完成多项家务任务。这一突破性进展不仅展示了大模型与机器人结合的新可能性,也为具身智能的工程实现提供了创新解决方案。

一、分层控制架构:大模型与机器人协作新模式

不同于传统的端到端大模型直接控制机器人的方式,HomeBody项目采用了分层控制架构。GPT Astra主要负责任务理解和策略制定,而宇树G1的本地控制系统则承担导航、轨迹规划、碰撞检测等具体操作。这种设计避免了大模型直接处理复杂机械臂运动的难题,同时保留了机器人原有的高效控制能力。

文章配图

具体而言,GPT Astra通过结构化工具调用(tool call)方式选择合适的机器人技能,并提供必要的参数。例如,在执行"拿药"任务时,Astra会根据之前保存的空间记忆确定药瓶位置,然后调用导航技能前往目标区域,再使用开抽屉技能取出药品。整个过程中,Astra无需了解机器人的具体关节控制细节,只需关注任务层面的语义表达。

二、环境探索与数字孪生构建

HomeBody系统首先要求机器人进行环境探索,以建立空间认知。在探索过程中,机器人利用相机、激光雷达和SLAM技术同步记录视觉信息、几何结构和自身姿态。这些数据被保存为长期空间记忆,为后续任务提供参考。

更重要的是,系统会将真实环境转化为数字孪生模型。通过Real2Sim流程,将SLAM生成的几何约束、视觉语义信息以及机器人观测数据整合到Isaac Sim仿真平台中,形成一个可交互的虚拟厨房环境。这种数字孪生不仅帮助机器人理解空间关系,还使得不同任务之间能够共享和复用空间信息。

三、性能对比与成本优势

研究团队对HomeBody系统进行了全面测试,结果显示其性能与成本表现均优于现有方案。在360次机器人技术测试中,Opus 5.5平均每次测试成本低于1美元,仅为GPT-6 Astra的50%,但性能却达到其1.8倍。此外,Opus 5.5的速度也快于GPT-6 Astra,整体成本效益比高达21%。

这一结果表明,通过分层控制架构,可以在保持高性能的同时显著降低系统运行成本。这对于推动具身智能技术的商业化应用具有重要意义。

四、未来展望与潜在影响

HomeBody项目的成功实施,标志着具身智能领域的一个重要里程碑。它不仅验证了分层控制架构的有效性,还展示了大模型与机器人结合的新可能性。未来,这种架构有望应用于更多复杂场景,如工业制造、医疗护理和家庭服务等领域。

然而,该技术仍面临一些挑战。例如,如何进一步提高系统的泛化能力,使其能够在更复杂的环境中稳定运行;如何优化数字孪生模型的构建效率,以适应实时任务需求等。这些问题都需要在未来的研究中逐步解决。

总的来说,HomeBody项目为具身智能技术的发展开辟了新的道路,其分层控制架构和数字孪生技术的应用,将对机器人领域的技术创新产生深远影响。