跳到正文
arXiv cs.RO· Siyuan Hu, Abulikemu Abuduweili, Yue Meng, Shipeng Liu, Quentin Leboutet, Chen Chen, Matthias M\"uller, Vladlen Koltun·· 5 天前精选AI 评分84

HALO:从仿真合成数据训练的人形机器人自主系统实现零样本实机迁移

Perceptive Humanoid Motion from Simulation

AI 导读

研究团队提出人形机器人自主系统 HALO,通过在约一千个程序化生成的家庭场景中合成视觉-语言-动作数据,摆脱对遥操作采集的依赖。HALO 习得坐椅子、导航到指定物体、侧身穿半开门、蹲爬桌下和推箱子等技能,并能组合完成长程任务。训练中未见过真实家庭场景,HALO 零样本迁移到物理世界,在六个未建图真实环境的 360 次试验中达到 91% 成功率。

推荐理由

论文给出用程序化生成家庭场景合成视觉-语言-动作数据、再零样本迁移到实机的完整路径,可参考其数据规模化思路。

来源:arXiv cs.RO · arxiv.org