跳到正文
10月21日周三
  1. arXiv cs.RO62

    REACT:VLM 引导接触重定向与生成式伙伴建模实现人形机器人-人交互

    REACT 是一个从人-人演示学习可部署人形机器人-人交互策略的框架,以语义接触结构作为监督信号串联演示处理、交互学习与机载控制。它用 VLM 引导的接触建模与重定向管线识别语义接触并迁移到人形-人几何上,再将特权交互策略蒸馏为完全依赖机载传感的自我中心深度策略,并引入生成式伙伴状态建模目标从遮挡视角预测伙伴运动。

  2. arXiv cs.RO78

    SuperMimic:用一个可微世界模型扩展人形机器人全身控制

    SuperMimic 用一个共享动力学的可微世界模型,在单一训练循环中同时训练世界模型与跟踪策略,通过短想象轨迹上的 backpropagation-through-time 为策略提供解析梯度。

    推荐理由:论文给出了用单一可微世界模型替代大规模强化学习训练的具体路径和算力对比数据,可评估其对人形全身控制规模化的影响。

  3. arXiv cs.RO62

    MARE:带阴影真值的开源月球车仿真器

    作者提出 MARE,一个基于 Unreal Engine 5 和 ROS 2 的开源月球车感知与自主仿真套件,包含地形生成、双物理月球车传感器仿真和 GNC 任务控制三部分。仿真器提供立体、激光雷达、事件和 SPAD 相机数据及像素级真值,低太阳高度角下预测阴影与渲染阴影的平均 IoU 为 0.79。立体深度分析显示阴影区域像素覆盖低于日照区域。

  4. arXiv cs.RO67

    Idealworks 与 NVIDIA 评测 COMPASS 导航的仿真到现实迁移

    Idealworks 与 NVIDIA 在工业移动机器人上系统评测 X-Mobility 与 COMPASS 学习式导航流程的仿真到现实迁移。在数字孪生中结合 Cosmos 生成的 sim-to-real 数据训练后,四个场景的实机成功率从 65.3% 提升到 91.7%,加权行驶时间接近减半,与产线导航栈相差 8.3 个百分点,且全部在机载 Jetson AGX Xavier 上运行。

  5. arXiv cs.RO62

    推理驾驶VLA存在感知-动作绑定缺口:能感知危险却不刹车

    论文指出推理增强的视觉-语言-动作(VLA)驾驶模型能感知并推理安全关键危险,却无法把该证据转化为安全动作,作者称之为感知-动作绑定缺口。通过匹配的仿真反事实与日志回放,研究发现路径内危险确实被编码在视觉表示中,但纵向规划主要由自车速度历史主导,对危险距离和模型自身推理轨迹响应微弱。

  6. arXiv cs.RO55

    从预测几何到动作:为具身操作学习互补预测表征

    论文提出一个两阶段框架,从多视角视频片段中学习互补的预测表征以增强具身操作策略。预训练阶段用冻结的3D基础模型提供稠密几何特征,压缩为预测几何表征并优化以保留场景结构及其时序演化,再对几何转变施加动作监督以提取强调动作相关转变的运动表征;下游后训练阶段通过几何查询迁移预测几何,运动表征引导动作生成路径上的中间特征,未来观测仅作为训练期特权监督,推理时不需要。

  7. arXiv cs.RO47

    概率可达-规避值函数(PVF):基于时序差分学习的概率可达-规避集计算方法

    提出自监督方法概率可达-规避值函数(PVF),用于在随机、可能无界的扰动下计算机器人任务的可达-规避集,适用于黑箱系统。在复杂度递增的系统上与基于Hamilton-Jacobi可达性(HJR)的基线对比,直至Hopper运动任务,结果显示当扰动非对抗性时,PVF的概率可达-规避集比对抗性HJR集更不保守、更准确。该方法已投稿至ICRA 2027。

  8. arXiv cs.RO44

    用期望自由能控制世界模型规划的测试时计算量:何时停止思考

    研究探讨了期望自由能(EFE)能否决定基于学习世界模型的规划该投入多少计算量,其目标函数结合目标距离与随机预测的分歧。实验发现,精英代价停滞时停止可减少精修且平均成功率接近固定深度参考;冻结模型下奖励分歧会降低成功率,而在线更新能部分恢复训练数据缺失区域造成的损失。代价停滞规则在优化利用模型误差时会失效,预测代价在任务成功率见顶后仍持续下降。

  9. arXiv cs.RO55

    EventSync:用事件驱动记忆更新支撑历史依赖的机器人操作任务

    EventSync 提出一种事件驱动记忆更新的分层框架,用于解决仅靠当前观测无法判断下一步动作的历史依赖型操作任务。视觉-语言模型依据任务计划与交互历史生成子目标,视觉-语言-动作模型负责执行,轻量级 Event Monitor 结合视觉观测与末端执行器轨迹判断当前子目标是否完成,只有取得完成证据后才写入已完成子目标历史并触发后续推理。

  10. arXiv cs.RO57

    PointHand 用户研究:关键点手部渲染如何影响新手遥操作示教与扩散策略成功率

    论文提出 PointHand 遥操作界面,把多指机械手渲染为指尖与关节的稀疏关键点,与策略可观测的关键点一致。在仿真 mug-in-box 任务中,18 名新手与 4 名专家在三种渲染条件下共采集 2,200 次试验,其中看到拇指与食指强调渲染的新手在 600 次试验中获得 441 次成功示教,高于真实手形渲染的 320 次。

  11. arXiv cs.RO47

    层级QP控制与权限引导恢复规划实现眼科机器人高精度RCM运动

    一项研究提出面向眼科机器人的高精度远心运动(RCM)伺服架构,通过层级QP控制器与权限引导恢复规划,解决RCM与末端跟踪目标冲突导致的伺服振荡问题。在200场景运动学基准测试中,该方案对128个近奇异目标实现100%到达率,对72个近关节极限目标实现99%到达率,软件RCM残差低于0.142 mm。

  12. arXiv cs.RO57

    枚举引导训练神经 Hamilton-Jacobi 安全证书的研究

    该研究提出一个验证引导的训练框架,用安全约束的概率枚举检测前向不变性违背,生成比标准对抗攻击方法更紧凑、更贴近失败边界的反例集合。用这些反例微调预训练的 HJ 值函数,在所有测试基准上扩大了可认证区域并缩短认证时间;作者还基于精炼后的证书引入部署时的屏蔽机制,在 Isaac Sim 物理仿真和真实自主赛车实验中,相比名义控制器和基于 LQR 的备份策略实现了零安全约束违背。

  13. arXiv cs.RO47

    PLaCA:基于未来隐变量变化的机器人动作生成框架

    PLaCA 提出一种世界到动作框架,直接从当前多模态输入预测空间结构化的 patch 级未来隐变量变化,并将其显式接入动作生成。在 LIBERO-Long 上 PLaCA 成功率达 79.0%,较 Action-only 基线提升 5.0 个百分点;在 CALVIN 上平均序列长度从 2.784 提升至 3.564。第二阶段训练仅更新 2.95% 的模型参数。

  14. arXiv cs.RO65

    头戴单相机替代腕部相机与位姿跟踪的免电子 UMI 手套方案

    论文提出用一个佩戴在采集者头部的单目相机(USD 122)替代 UMI 手套方案中的腕部相机、位姿跟踪器及其独立数据流,读取免电子手套(USD 22)上的印刷基准标记与工作区纸砖,从策略将看到的同一帧中给出 6-DoF 夹爪位姿和爪宽;部署时同一相机装在机器人旁的低成本(USD 120)机械臂上,依据机器人关节状态模仿采集者头部运动。