跳到正文
arXiv cs.RO· Jiaming Hu, Shi Bo, Yan Zheng, Tian Wang, Florian Dubost, Alejandro Mottini, Junze Liu, Arvind Srinivasan, Kai Zhong, Kun Qian, Sharon Gao, Vianne Gao, Houyu Zhang, Qingjun Cui·· 4 小时前AI 评分58

SWIM:从行为中学习状态权重以训练 JEPA 世界模型

SWIM: Learning What Matters from Behaviors for JEPA World Models

AI 导读

SWIM 提出用逆动力学模型从离线轨迹中学习状态特征权重,用于 JEPA 世界模型的状态监督训练。该方法通过由当前状态和观测到的未来位移预测已记录动作,量化各状态特征对动作预测的贡献,并据此构建加权状态度量来对齐潜空间与状态距离。逆动力学模型只在训练阶段使用,规划时仍仅依赖图像;在五个仿真机器人操作任务上,SWIM 的规划成功率一致优于均匀状态加权。

来源:arXiv cs.RO · arxiv.org