跳到正文
10月28日周三
  1. arXiv cs.RO72

    Rollback:用世界模型回溯经验改进机器人策略

    Rollback 提出一种策略改进范式,让世界模型回退到关键决策点、分支尝试不同动作并对比结果,从而把反事实结果蒸馏为动作级监督,无需单独学习价值模型。在方块抽取、抛球和桌面冰壶三项真实任务上,成功率分别比最强基线绝对提升 10.67%、11.11% 和 11.85%,抛球与桌面冰壶在训练 8 小时内超过人类玩家平均成功率。

  2. Shanghai AI Laboratory - Embodied Intelligence60

    上海人工智能实验室等联合推出材料多模态大模型“材华·MatVerse”

    苏州国家实验室、上海人工智能实验室与上海交通大学等联合推出“材华·MatVerse”材料多模态大模型及智能体应用体系,采用“独立编码器+统一解码器”架构,将XRD谱图、电镜图像和分子结构对齐到同一语义空间。

    推荐理由:材料给出多模态统一表征架构与19类学科评测基准,可了解材料大模型如何从检索走向机理推理。

10月27日周二
  1. 机器之心 · 微信公众号76

    Ropedia 发布六项研究成果,探索人类第一视角数据如何转化为机器人能力

    Ropedia 在 10 月 19 日至 23 日的第一届 Ropedia Super Week 上集中发布六项研究,围绕人类第一视角视频如何转化为机器人可用的训练与执行信息。

    推荐理由:六项研究集中回答人类第一视角数据如何转成机器人可用的训练与执行信息,并给出跨本体与真机对照结果。

  2. CVer · 微信公众号77

    清华AIR提出OxyGen:统一KV Cache管理让机器人边说边做

    清华大学智能产业研究院联合清华电子工程系、中国科学技术大学提出OxyGen,通过统一KV Cache管理让具身模型的动作与语言推理共享前缀计算,论文已被NeurIPS 2026接收。

    推荐理由:论文给出统一KV Cache管理方案与多平台实测数据,可供端侧具身推理部署参考。

  3. 3D视觉工坊 · 微信公众号62

    ECCV'26 开源 MV2GF:用视觉几何基础模型提升跨视角行人检测泛化,MODA 最高涨 4.7 点

    ECCV'26 论文提出多视角行人检测方法 MV2GF,借助预训练视觉几何基础模型 DA3 的多视角特征与 3D 点图,替代透视投影来聚合 BEV 特征。在训练与测试相机配置不同的设定下,MV2GF 在 GMVD-D、MVPerception、Wildtrack 上的 MODA 分别比此前最优高 4.6、4.7、2.2 个点。

  4. arXiv cs.RO50

    FlatVPR:用于基础模型特征流形几何校正的即插即用几何线性残差适配器

    FlatVPR 提出一种即插即用几何线性残差适配器,对 DINOv2-ViT-S/14 等基础模型特征施加残差变换,并用 Pullback Flatness Loss 压低流形曲率,使相邻锚点间描述子可由线性插值重建。在 NCLT 数据集上,即使锚点间隔达 100m 且存在剧烈季节变化,该适配器仍带来明显性能提升。地图构建被纳入 EM 框架,分为流形适配的连续 M 步与锚点选择准则的 E 步。

  5. arXiv cs.RO58

    可微仿真器能否给出更好的策略梯度:ICLR 2026 论文提出 DDCG 与 IVW-H

    ICLR 2026 论文重新检验了“可微仿真器能否给出更好的策略梯度”这一问题,指出不连续动力学带来的偏差并非主要障碍。作者提出轻量测试 DDCG,在非光滑区域切换估计器,仅需一个超参数且小样本下仍可靠;同时提出逐步骤逆方差实现 IVW-H,在可微机器人控制任务中无需显式检测不连续即可稳定方差。结论认为,估计器切换能提升受控实验中的稳健性,而实际部署中方差控制往往更关键。

  6. arXiv cs.RO58

    面向农业操作的视觉-语言-动作模型机器人学习框架

    研究团队提出一套面向农业到达与抓取的仿真到现实机器人学习框架,基于 MuJoCo 搭建含多种番茄植株结构的农业环境,用摇杆遥操作采集专家演示。Octo 和 π0.5 两个预训练通用策略先用仿真演示适配,再在 Franka Research 3 机械臂上用真实演示微调。结果显示 π0.5 的任务表现分数高于 Octo,在视角与空间偏移等分布偏移下退化更小,研究还考察了本体感知信息对策略性能的影响。

  7. arXiv cs.RO63

    CLARO:用 VLM 智能体在杂乱场景中完成开放词汇抓取

    CLARO 是一个 VLM 智能体,调度开放词汇目标检测、分割、6-DoF 抓取和非抓取推挤等技能,在杂乱环境中定位并取出语言指定的目标。它记录历史动作以支持长程执行,并输出抓取位姿或 3D 路点,从而无需任务特定训练即可迁移到不同机械臂。在动态仿真环境中,CLARO 平均成功率为 89.1%,在高杂乱场景中相对最强对比方法提升超过 16%;在真实机械臂上成功率为 88.8%。

  8. arXiv cs.RO51

    面向航天器巡检的光照感知主动感知方法

    作者提出一种巡检规划框架,用基于分类变分自编码器(VAE)的学习式相机信息度量替代几何可见性检查,以应对轨道光照剧烈变化导致的巡检失效。该方法在逼真物理仿真器中实现制导、导航与控制架构并测试多种轨道光照与视角,平均亮度达0.57、81.6%的观测高于0.25,而带光照带的几何规划为0.02(3.0%)、纯几何规划为0.04(6.0%)。

  9. arXiv cs.RO55

    通过人机递物主动感知上肢功能活动度

    该研究将上肢功能活动度估计建模为主动感知问题,用损伤系数参数化健康关节限位的缩减,并集成到机器人交互时使用的人体模型中。作者提出在线主动感知流程,机器人通过反复递物请求主动探测用户,并逐步更新对损伤系数的贝叶斯信念。仿真研究与机器人平台上的概念验证显示,该流程能在真实人机递物中较准确地恢复损伤系数。

  10. arXiv cs.RO60

    CapPro:用单段人类视频引导 VLA 模型适配新操作任务

    研究者提出 CapPro 框架,让视觉-语言-动作(VLA)策略仅凭一段人类演示视频就能适配此前未见的操作任务,无需目标任务的机器人演示或微调。该框架包含阶段感知的人类视频表示模块和视频条件适配模块,前者通过视觉 token 选择与阶段描述监督学习任务相关查询表示,后者将紧凑视频与查询表示注入预训练 VLA 策略的动作条件上下文。

  11. arXiv cs.RO62

    OneDemo:从单条演示学习策略并生成数据

    OneDemo 提出一种强化学习框架,把单条成功演示编辑成适配新任务配置的轨迹,学到的编辑器既作任务策略也作可复用的演示生成器。在 15 个 Meta-World 任务上,它平均用 53.7k 次环境交互达到 92.7% 成功率;在 9 个 DexMimicGen 任务上生成演示的平均成功率为 98.4%,用生成数据训练的 BC-RNN 策略在同等数据规模下平均成功率达 99.6%。

  12. arXiv cs.RO62

    DiVeR:面向 VLA 测试时扩展的决策关键验证器学习

    DiVeR 提出从采样动作表示的离散度估计决策关键性,并据此重加权验证器学习,把学习重点放在动作选择影响最大的状态上,无需步级标注或额外环境交互。在 LIBERO、RoboCasa 和 Franka Research 3 实机实验中,DiVeR 通过更有效的验证器引导动作选择持续提升任务成功率,验证器推理开销可忽略。

  13. arXiv cs.RO62

    CognitiveReality:面向沉浸式协作 VR 遥操作的机器人无关语义高斯建图与 LLM 智能体

    CognitiveReality 将机器人 RGB-D 流构建为语义索引的 Gaussian-TSDF 地图,供 VR 操作者与工具调用语言智能体共享。同一建图程序仅靠配置适配不同平台,可接入机器人 SLAM、关节运动学、动捕或视觉跟踪位姿,并以影子跟踪与关键帧锚定 PnP 应对定位中断,以 2 Hz 维护开放词汇实例身份和逐物体质量。

  14. arXiv cs.RO60

    DGT-Map:面向异构车辆的多任务学习方向性全局可通行性地图

    DGT-Map 提出一种自监督框架,从 RGB-D 观测和运动信号学习全局、方向性且以车辆为条件的可通行性代价地图。它用共享多任务主干学习跨车辆的共同地形特征,再由各车辆专属预测头保留平台相关响应,推理时输出按航向索引的代价地图供方向感知规划器使用。

  15. arXiv cs.RO59

    EPCC:用慢速专家演示与快速试玩实现快于演示的规划

    作者提出 Expert-Play Contouring Control(EPCC),把慢速专家演示与快速非专家试玩结合,实现快于演示的执行速度。专家演示训练隐轨迹生成器,其预测被重参数化为与时间无关的任务进展轮廓,试玩数据训练快速动作结果的世界模型,部署时规划器沿该轮廓优化动作并惩罚偏离。

  16. arXiv cs.RO60

    一种用于牵引挂车前进与倒车机动的路径跟踪新算法

    论文提出一种面向单挂车铰接车辆的路径跟踪算法,在挂车侧施加横向控制律,并对牵引车转向角做短时域预测调整,使前进与倒车都能稳定收敛到目标路径。该方法基于几何、无需逐车标定或训练,在高保真物理仿真中直线、圆弧和倒车对接轨迹的稳态或最终横向误差为0.02–0.05 m。作者在小尺度牵引挂车机器人上实测,控制器运行于低成本微控制器,在约200 ms位姿检测延迟下重复倒车对接的横向误差低于13 mm。

  17. arXiv cs.RO67

    VLN on the Fly:面向空中机器人的机载视觉语言导航栈

    作者提出 VLN on the Fly 机载视觉语言导航栈,将指令 grounding、规划与控制保持为可分别检查的阶段:量化 VLM 把指令定位到粗粒度图像单元,深度信息将其抬升为 3D 目标,快速 B 样条规划器生成可行轨迹,预训练强化学习策略在多种四旋翼上跟踪轨迹并输出电机指令。

  18. arXiv cs.RO65

    ForceDelta-VLA:蒸馏力条件动作修正用于接触密集操作

    ForceDelta-VLA 提出修正蒸馏框架,用冻结教师模型的力条件与无力条件两种预测构造显式力修正目标,并另设延迟修正目标处理参考动作不匹配。在九项单臂与双臂接触密集任务上,该系统平均成功率为 82.2%,ForceVLA 基线为 54.4%,第一阶段时序教师直接执行为 70.6%。相比 ForceVLA,完整系统在两个平台上将成功试验的平均峰值接触力降低约 26%。

  19. arXiv cs.RO78

    X-WBC:面向人形全身控制的跨本体基础模型

    X-WBC 是一个跨本体人形全身控制基础框架,将相对共享的人体运动语义与本体特定的物理执行分离。它用人类中心命令 token 对齐完整人体运动、机器人参考运动和稀疏 VR 观测,由因果 Transformer 从多机器人混合 rollout 中学习可复用时间结构,轻量机器人专属模块再把共享表示映射到各机器人的本体感知与动作空间。

    推荐理由:论文提出跨本体人形全身控制框架,把共享人体运动语义与各本体执行解耦,并在九种仿真本体和四台实机上验证联合训练效果。

  20. arXiv cs.RO47

    机器人运动作为键控通信信道:通过动作隐写传输消息

    研究者提出一种“运动通信”方法,将任意短消息(如智能体当前意图)作为噪声编码进任意预训练策略的动作中,使机器人运动可被远程视觉或动捕检测,且不降低策略性能。该物理信道不依赖无线通信、无需额外硬件或与机器人建立直连。在50 Hz运行的实机上,四台机器人联合以0.8 bits/s的总速率恢复8位消息,并在仿真环境与实机部署中完成验证。