跳到正文
arXiv cs.RO· Zhuoyang Liu, Dantong Niu, Botong Zhang, Boning Shao, Jing Wang, Ruijie Zheng, Yuvan Sharma, Runyu Lu, Jiaming Liu, Renrui Zhang, Roei Herzig, Yutong Bai, Ken Goldberg, Danfei Xu, Yuke Zhu, Guanzhi Wang, Linxi "Jim" Fan, Trevor Darrell·· 2 小时前AI 评分56

AW-0:将代码规划与视频动作预测统一的具身智能世界动作模型框架

Agentic World Action Models

AI 导读

论文提出 AW-0,一个把基于代码的规划与联合视频、动作预测结合的智能体世界动作模型框架。它在统一的 mixture-of-transformers 架构中同时建模代码、未来视频和机器人动作三条耦合生成流:代码专家生成参数化的技能例程与控制逻辑,视频和动作专家生成未来视觉状态与底层电机指令。

来源:arXiv cs.RO · arxiv.org