TravSUITE:自监督不确定性感知IRL与地形估计的可通行性系统
TravSUITE 是面向越野高速导航的可通行性系统,由利用视觉基础模型构建几何-语义局部地图的体素建图器和在鸟瞰图(BEV)中联合预测几何、语义、速度与代价的统一神经网络组成。
TravSUITE 是面向越野高速导航的可通行性系统,由利用视觉基础模型构建几何-语义局部地图的体素建图器和在鸟瞰图(BEV)中联合预测几何、语义、速度与代价的统一神经网络组成。
该论文研究流匹配视觉-语言-动作(VLA)模型中数值求解深度与执行时域的耦合关系,发现粗粒度数值积分在快速重规划下降低精度,但在延长开环执行时反而提升任务表现。
研究将测试时训练(TTT)集成进 InternVLA-A1 和 Pi0.5,通过配对示教与机器人轨迹训练,探索以人类示教为条件的动作生成。在当前规模下,加入 TTT 与配对数据训练并未带来基于示教的一致目标选择,更短序列、全轨迹梯度连通和对比正则也未明显提升对示教的响应。示教缩减为单帧线索时,实机执行仍偏好固定位置的杯子。
DiscoDemo 用带特权信息的潜在条件强化学习生成器配合并行逆向课程和成功门控多样性目标,产出多条成功闭环行为,经安全过滤后导出为静态数据集供下游视觉运动模仿学习。在四个操作任务上,仿真中下游平均成功率从最强基线的 40% 提升到 62%,实机上从 39% 提升到 78%。作者认为成功解法的多样性可改善预训练流匹配 VLA 的模仿学习,并与纠错数据采集互补。
研究者提出一种标准化机器人模块,将磁吸对接接口与两个驱动关节结合,可从平面二维构型折叠成三维结构。单一设计的模块能组装成三模块“trilobite”和五模块“seal”两种形态,操作者用少量离散运动指令操控已组装的母体机器人依次与备用模块磁吸对接,组装出结构相同的第二个个体并与母体分离,母体保留全部原有模块,形成出芽式物理复制。
针对移动传感器位姿估计误差导致的GP回归输入偏差问题,提出偏差感知高斯过程(Ba-GP)框架,利用已记录GP后验均值梯度将输入偏差与噪声传播为均值与协方差修正,并基于加性协方差结构给出数值高效的一阶校正算法。
研究提出将神经细胞自动机(NCA)与既有位点选择、碰撞感知控制结合的模块化框架,用于集群机器人形态生成。框架引入去中心化附着位点发现机制,已就位机器人通过更新并共享局部 NCA 状态识别新附着位点,部署时无需预定义位点列表。作者还提出离线稀疏保留微调和假阳性损失以衔接 NCA 生长与逐步物理装配,仿真可扩展至数百台机器人并提升形态准确率,Crazyflie 四旋翼实验验证了集成执行流程。
该论文研究以全身近距传感器作为归纳偏置,学习反射式避碰行为,发现低分辨率有损传感器比高分辨率全覆盖更能提升学习效果。研究在强化学习环境中比较了八种候选表征,包括隐空间压缩、未来接触预判、有损退化和特权状态估计,并在刻意限制样本与算力预算下端到端训练超过200台人形机器人玩简化版躲避球。作者还发现,预判接触发生的时间和部位反而降低了学习样本效率。
研究用强化学习训练一套由二十台机器人共享的策略,仅以夜间结束时最冷五台机器人的平均温度作为末端奖励,便涌现出聚集与在核心和边缘间轮换两种行为。测得每台机器人存活所需最小储能为 155.6 +/- 1.3 pcm-h(1 pcm-h 为 7.2 kJ 储热),比静止抱团低 37%,与基于物理的下界相差 13% 以内;在静止抱团会损失六台机器人的能量预算下,所有机器人都存活。
该论文指出,VLA 模型在 bf16 下全权重微调且不保留 fp32 主副本时,AdamW 会把小于权重 1/512 的更新直接舍入掉;在 12 个开源 VLA 代码库中有 9 个默认或文档化配方这样训练,包括 LeRobot 的 SmolVLA 默认配置和 π0/π0.5 指南。
推荐理由:原文量化了 bf16 微调丢失更新的比例,并给出 fp32 主副本在 LIBERO 上的成功率对比,可作为训练配置的参考。
该论文提出 BM2PC,一个用于柔性线性物体(DLO)动态操作的贝叶斯多模态 MPC 框架,将多模态规划建模为平衡控制质量与行为多样性的集合优化问题,并通过增量更新维持多个候选控制模式。
EgoForesight 是一个视觉-语言-动作框架,联合利用机器人示教轨迹与带噪自我中心视频进行策略学习,通过可靠性条件加噪与可靠性加权回归降低不可靠动作标签的影响,并用特权未来表征蒸馏从演示结果中补充监督。
FORCA 是一个编码智能体,以视觉观测和腕部力/扭矩测量为输入,编写用于接触探测和力响应运动的 Python 程序,并在执行间隙结合力记录与视觉结果诊断失败、修订运动与力反馈控制逻辑。
WorldMirror 是一个智能体式真实到仿真框架,可从野外机器人演示构建交互式数字孪生。它把真实到仿真构建表述为可执行世界程序的迭代精化,由编码智能体分解场景、规划重建步骤并调度图像与 3D 生成工具,再通过验证反馈修正程序。在 DROID 上的实验显示,该框架能重建视觉忠实、几何一致的可交互世界,并保持所记录机器人轨迹的物理有效性。
作者提出 SEVI 框架,用证据安全评论器在一次前向推理中同时估计未来约束违反风险与认知不确定性,在动作执行前判断是否不安全或证据不足,并用离线训练的恢复策略覆盖该动作。
PrefO2O 提出离线到在线潜在偏好迁移框架,在目标任务上无需任何人类反馈即可实现零样本偏好强化学习(PbRL)。该方法从源任务的少量离线偏好数据中学习任务无关的潜在偏好空间,将可迁移的偏好结构与任务特定变化解耦,并通过置信度加权的最优传输对齐生成伪偏好监督用于在线奖励适应。
KiRoSe 提出用机器人运动学数据而非多相机视频流来分割演示数据,通过稀疏运动 token(SMT)紧凑表示重复出现的运动事件。该方法用子任务标注监督开放语言模型解读 token 序列,在 F1 指标上明显优于基线分割方法,并可零样本迁移到未见过的机器人本体和第一人称人体运动。除分割外,KiRoSe 还能在未见机器人上跟踪任务进度并检测动作反向。
作者提出 RepresentNav 导航基础模型,用 Representation Residuals 三层 transformer 聚合多个视觉基础模型的全深度特征,构建由策略自身目标驱动的表征空间。
推荐理由:该论文提出用策略自身目标构建视觉表征空间,并在其中预测未来场景表征,为导航策略的表示设计提供了可迁移思路。
智元于10月22日正式开源AGIBOT WORLD 2026第四期“具身推理”(Physical Reasoning)数据集,称其为首个真实场景Physical Agent数据集。
研究提出 The Trinity 递归自我改进框架,通过 Creator、Explorer、Evolver 三个角色把世界生成与 Harness 演化耦合起来。
OSWAM 提出一种单步动作生成的世界动作模型,通过构造 imagination tokens 初始化扩散过程,并提供物理先验与动作条件表示,从而把直接策略世界动作模型所需的数十步去噪压缩到一步。
PhysEvolve 提出一种以验证器为依托的自进化框架,让视觉语言模型从自己提出的可执行世界程序和仿真生成任务中学习因果物理推理。每轮由共享 VLM 提出世界程序与证据模式,确定性物理引擎冻结有效世界并模拟基线与去身体反事实分支,生成离散视觉任务,再用精确验证器反馈通过 GRPO 更新策略和课程。
Rollback 提出一种策略改进范式,把动作条件世界模型从单向模拟器变成可回溯的反事实引擎:回到关键决策点、分支尝试不同动作并对比结果,从而把反事实结果蒸馏为动作级监督,无需单独学习价值模型。
推荐理由:世界模型被用作可回溯的反事实引擎,为策略改进提供细粒度动作级监督,并给出三项实机任务的提升幅度。
研究提出OSMA-Bench,一个基于空间匹配场景集、仅障碍类型不同的障碍条件安全运动适应基准,并给出语义敏感度指数(SSI),衡量机器人的间距和随距离变化的速度与平滑度是否遵循障碍的谨慎排序。
ETH Zurich 的 ANYmal 四足机器人仅用脚三次解开一个 10 磅重的巨型魔方,每次耗时约 8 到 9 分钟。该演示结合计算机视觉、传统魔方求解算法与强化学习,让机器人学会平衡、施力和纠错。这种“pedipulation”(用脚操作)有望让未来机器人无需手部即可开门、转阀门或移动障碍物。
云深处科技围绕自研具身大脑DEEPRobotics-Brain发布五项研究成果:世界模型DR-WM-1.0、具身基础模型DR-VLA-2.0、具身智能体DR-Agent、策略优化框架DR-APO和数据闭环平台DR-Benchmark。
清华大学丁宁团队联合北京邮电大学、北京大学及自然意志Nature Will的研究员构建了面向跨本体灵巧操作的仿真平台与评测基准HandsOn,包含66项人工验证任务和18,000条人类仿真遥操作示范。
推荐理由:读者可了解灵巧操作评测为何要区分执行与迁移,以及当前多任务策略在双手协作任务上的具体失败环节。
云深处科技围绕自研具身大脑 DEEPRobotics-Brain 密集发布五项研究成果:世界模型 DR-WM-1.0、具身基础模型 DR-VLA-2.0、具身智能体 DR-Agent、策略优化框架 DR-APO 和数据闭环平台 DR-Benchmark,合作方包括麻省理工学院、清华大学、浙江大学等七所高校。
荷兰代尔夫特理工大学MAVLab的MonoRace系统只靠一个前视摄像头和IMU,在2025年阿布扎比自主无人机竞速赛中连续战胜三位世界冠军级飞手,论文于2026年10月14日发表在Science Robotics。
推荐理由:代尔夫特团队拆解了单目相机加IMU在高速竞速中的感知、状态估计与强化学习控制分工,可迁移到算力受限的实机系统。
哈佛、英伟达、伯克利、MIT 和斯坦福的研究团队提出 RAX(Robot Agent eXploration),让通用 Coding Agent 连接机器人感知与控制接口,通过在线探索把成功决策写成可执行程序并积累为可复用技能,模型参数保持冻结。
推荐理由:RAX 用冻结模型加在线探索生成可复用程序,零动作示范下在五大仿真基准平均领先 37.4 个百分点,为机器人学习提供了不同于扩大数据与模型的一条路径。
ProAS 是一个可插拔的进度感知优势塑形框架,通过动态演化的 Agentic Reference Graph(ARG)实现细粒度信用分配,缓解 GRPO 等无评论家算法将轨迹级优势均分给所有动作的问题。
研究团队提出 RynnVLA-Latent 框架,通过 RynnLAM 从视觉变化中学习连续、三维接地的潜在动作,无需原生机器人控制信号。该方法处理了 30.1K 小时人类、机器人与仿真视频,生成 745.52M 个潜在动作描述符,再用流匹配预测潜在动作块并适配到具体本体。
推荐理由:该工作把异构交互视频转成三维潜在动作监督,为 VLA 预训练绕开动作标注稀缺提供了一条可复用的数据路径。
HuGe 是一组人形通用视觉-语言-动作模型(VLA),在超过 2000 小时的第一视角人类与机器人数据上预训练,通过预测潜动作 token 驱动预训练全身控制器并输出手部控制信号。
微软团队提出 Code Video Model,由 Coding Agent 将 Prompt 转化为 Three.js 程序,把几何布局、物体运动、相机轨迹和事件时序统一为可执行场景表示,再以程序预演视频引导视频生成。
Chelsea Finn 转发 Alexander Swerdlow 的论文,提出生成式价值分类器(generative value classifiers),一种不需要动作条件的 Q 函数参数化方式。作者认为这类方法可与大规模预训练策略结合,并从更丰富的输出信号中更好地学习和泛化。论文链接为 alexanderswerdlow.github.io/gvc/。
MIT 研究人员开发出一款由活体肌肉细胞驱动的纸片厚度微型游泳机器人,细胞对闪光作出反应,使机器人能够游动并转向。该研究被认为可能推动未来生物混合机器人和微型机器的发展。
香港大学与忆生科技参与的DexHoldem将德州扑克搬上真机,用UR10e机械臂和Shadow灵巧手同时评测灵巧操作、牌桌状态感知与闭环运行,已被NeurIPS 2026 Workshop接收。
RoboWorld Challenge 2026 已开放报名,设 WorldNav、HA-VLN 2.0 和 SafeDrive-VLA 三个赛道,分别考察语言引导的开环路线规划、动态人群中的社会导航和指令冲突下的安全驾驶,最终提交截止 2026 年 11 月 30 日。
香港科技大学作者提出 World-to-Wrist VLA(W2-VLA),用全局任务上下文预测未来腕部潜变量,再指导精细动作生成。该方法在 LIBERO 达到 98.5% 平均成功率,RoboTwin 2.0 的 Easy/Hard 设置分别为 60.71% 和 18.21%,并在桌面清理、遮挡放置和双臂插头插接三项真实任务的标准与 OOD 条件下超过基线。
上海AI实验室、浙江大学与上海交通大学的研究者提出可穿戴采集系统EgoExplorer,用头戴GoPro HERO13、5个VIVE Ultimate Trackers和MANUS Metagloves或Wuji手套记录100小时人体活动数据,对齐第一视角视频、全身运动重建、手指动作与触觉观测。