跳到正文
arXiv cs.RO· Jun Cen, Yubo Guo, Hao Li, Liangkai Li, Yaoxu Lyu, Meng Wei, Zeqi Xiao, Sizhe Yang, Yuqiang Yang, Yifan Ye, Shanghang Zhang, Duo Zheng·· 9 天前AI 评分69

WorldBridge:用视频与动作专家桥接世界动作模型的任务泛化

WorldBridge: Bridging Video and Action for Task Generalization in World Action Models

AI 导读

WorldBridge 提出一种世界动作模型(WAM),将视频专家与动作专家通过结构化注意力和联合流匹配连接,用于提升机器人在新任务上的泛化能力。在 RoboTwin 2.0 上,仅用分布内视频-动作监督时分布外任务成功率为 25.07%,加入无动作标签的任务视频后升至 55.90%,每任务再加一条带动作标签的示范后达到 70.70%。

来源:arXiv cs.RO · arxiv.org