跳到正文
arXiv cs.RO· Minghao Zhu, Bohan Hou, Kun Xiang, Zixuan Wang, Yinzhou Tang, Yifei Yang, Zhikai Wang, Tianyi Zhang, Kehan Li, Haoyu Zhao, Siteng Huang, Leigang Qu, Sicong Leng, Dongchi Huang, Mingxiu Chen, Shijian Lu, Yue Wang, Xiaodan Liang, Zhenyu Zeng, Deli Zhao, Chengju Liu, Jianfei Yang, Xin Li·· 3 小时前AI 评分72

RynnUnify 发布 16B 统一具身模型,兼顾视觉规划与机器人控制

RynnUnify: Towards Unified Embodied Brain

AI 导读

RynnUnify 是一个 16B 统一具身模型,通过交错的视频-语言推理把具身理解与长程视觉规划结合起来,覆盖空间推理、物理预测与 grounding。作者还基于强化学习开发了智能体扩展,用于选择性利用视频预测推理未观测状态和交互结果,并开发了 world-action 扩展把理解与预测能力转化为机器人控制。

来源:arXiv cs.RO · arxiv.org