MIT CSAIL 与 CMU 提出 Workspace Models,让机器人以轻量记忆模块学习复杂技能
MIT CSAIL 与 CMU 提出 Workspace Models,用大视觉语言模型在离线阶段把长历史观测压缩为隐向量,并训练小型策略模型,使机械臂能在毫秒级内规划下一步动作。
推荐理由:该研究把大模型的离线推理蒸馏为轻量记忆模块,让机械臂在毫秒级内完成长时记忆推理,为机器人实时决策提供可迁移思路。
MIT CSAIL 与 CMU 提出 Workspace Models,用大视觉语言模型在离线阶段把长历史观测压缩为隐向量,并训练小型策略模型,使机械臂能在毫秒级内规划下一步动作。
推荐理由:该研究把大模型的离线推理蒸馏为轻量记忆模块,让机械臂在毫秒级内完成长时记忆推理,为机器人实时决策提供可迁移思路。
苹果研究团队在arXiv发布论文《Perceptive Humanoid Motion from Simulation》,公开人形机器人自主控制系统HALO,并同步开放训练与部署代码。
香港科技大学(广州)等机构提出 LongChang,基于 MuJoCo 构建 15 个场景(1 个普通物理对照、14 个各改写一条规律),让大模型在无课题提示下自主探索并发现隐藏物理规律。
西安交通大学兰旭光教授团队提出AffordSim,将开放词汇三维可供性预测接入仿真轨迹生成,从自然语言任务描述出发定位物体功能区域,再结合cuRobo运动规划生成可执行操作示范。
苹果研究团队公开 HALO 人形机器人研究,用宇树 G1 背负 Mac mini M4 Pro 本地运行千问模型,在 6 个未扫描的真实家庭中 360 次测试平均成功率达 91%。
推荐理由:苹果用纯仿真合成数据替代人力遥操作,在陌生真实家庭中验证人形机器人技能迁移,为绕开数据瓶颈提供了一条可规模化的路径。
伽马智能与TeleAI联合宇树推出LocoManiLab,这是一个面向人形机器人移动操作的统一测评框架,覆盖五类家庭空间、13个场景实例和234项任务,以宇树G1和Dex3灵巧手为统一测试本体。
浙江大学提出SplatAnything,用高斯间距中位数归一化(GSNorm)替换RDNorm,实现任意场景的前馈式3DGS重建。该方法在ScanNet、DL3DV、Tanks and Temples等七个数据集、4至64视图输入及外推视角下多数设置取得最优LPIPS与DISTS,4视图推理耗时411毫秒。
Meta FAIR、Chandar Research Lab与Mila等机构在arXiv公开RoboJEPA,将动作条件世界模型预测器扩至80亿参数,用离线“想象误差”预估更大模型的预测质量。
北京大学DAGroup等团队向社区开放约20万小时HumanNet第一视角Ego数据,其中约10万小时已上传完成,并整理出5万小时训练语料Open-HumanWAM-50K。
推荐理由:原文给出从100小时到5万小时的Scaling曲线与零样本成功率,可据此判断人类第一视角数据对机器人后训练泛化的实际收益。
华盛顿大学等机构的研究者提出语言条件视觉导航任务 LCVN,模型仅凭起点图像和语言指令预测完整导航动作序列,无需真实环境反馈纠错。团队构建了含 39016 条轨迹、117048 条人工核验指令的数据集,并比较两条路线:LCVN-WM 与 LCVN-AC 在世界模型潜空间中学习策略,LCVN-Uni 基于 Anole-7B 联合预测动作与画面。
戴盟机器人团队联合厦门大学、南京大学、大湾区大学、复旦大学提出 Touch-R1,将强化学习用于跨传感器触觉推理,论文已被 NeurIPS 2026 接收。团队同时构建 TouchReason-1M 数据集(14,700 条触觉序列、132.3 万个同步数据对,覆盖 1,000 余个物体和 9 大类材料、四种视触觉传感器)与 TouchReason-Bench 基准。
SWAM 研究世界动作模型在引入动作学习后如何维持语言-视频对齐,整理了约 47,000 小时通用视频、第一视角视频、UMI 演示和机器人演示数据,系统比较语言-视频监督、语言-视频-动作监督及两者联合使用的效果。
推荐理由:原文系统比较了语言-视频与动作监督的组合方式,并给出跨模态对齐在动作学习中的训练配方与实机泛化结果。
加州大学圣地亚哥分校团队在arXiv预印本提出EgoThumb,一种由掌侧广角相机和模仿学习模型驱动的可穿戴机械拇指,可自主抓握并稳定物体,让使用者单手完成拧瓶盖、搅拌茶等任务。
研究团队提出触觉基础模型 LingBot-Touch,可在压阻、磁性和视触觉等不同传感器间生成统一表征,并易于扩展到新传感器类型。其触觉 token 可即插即用地接入扩散策略以及 π_{0.5}、LingBot-VLA 等视觉-语言-动作模型,在仿真与多硬件平台实机实验中提升复杂操作任务表现,同时保持较高计算效率。
一项论文提出触觉数据的表征方式可能比分辨率更关键,作者在3x3手套阵列到240x240光学指尖等多种传感器上预训练触觉编码器 LingBot-Touch,并用4种策略在26个真实任务上测试。
MIT 与纽约大学研究人员提出 FLEX,一个面向机器人运动规划的特征编辑流程,让机器人从自然语言指令中推断未明说的偏好。FLEX 分三步:Add 把用户提到的物体加入避让特征,Generalize 借助 GPT-4o 归纳出脆弱、易燃、电子设备等更高层类别,Mask 用视觉系统删除已不在环境中的物体,整个流程约 5 秒。
Dexmate 让 Codex(GPT-6 Astra)和 Claude Code(Opus 5.5)通过 MCP 工具控制 Vega 轮式双臂移动操作机器人,水果入篮和开门任务全部成功,精度更高的碗架任务在原始工具接口下无一成功。
推荐理由:Dexmate 用 Codex 和 Claude Code 实测机器人任务,量化了动作之外的时间开销与安全响应缺口。
UC Berkeley 与 NVIDIA 在 CoRL 2026 上联合提出 agentic robotics 方法,把机器人编程从数据问题转为编码问题:用大语言模型驱动的编码智能体分解任务、生成代码,并在仿真中迭代调试。
UC Berkeley的Ken Goldberg团队与NVIDIA机器人工程负责人Spencer Huang提出“agentic robotics”方法,让AI智能体在仿真中生成、测试并修正机器人控制程序,无需额外采集数据。
推荐理由:报道介绍了用多智能体在仿真中生成、测试并修正机器人程序的方法,并给出仓储分拣的落地数据。
DTU 与奥胡斯大学、丹麦技术研究所及 TICRA、Arctic Unmanned 等企业合作,用物理气相沉积(PVD)制备超薄涂层以增强或减弱无人机雷达反射信号。初步测试在矩形板和圆柱等简单形状上实现反射信号显著衰减,下一步将把该方法适配到几何更复杂的无人机,并在真实环境中测试其雷达探测效果。项目另一条路线是开发可调控电磁波的人工超表面,据称制造成本可能低于 PVD 处理。
苹果研究团队公开HALO人形机器人研究,以宇树G1为身体、背负运行千问模型的Mac mini M4 Pro,在6个未扫描的真实家庭中完成坐下、钻桌底、推箱子等任务,360次测试平均成功率91%。
同一新闻,精选展示《苹果公开 HALO 人形机器人研究:宇树 G1 背 Mac mini 跑千问,陌生家庭任务成功率 91%》
VLM 能理解语义:抓哪个物体、放到哪里。但如何把这些知识转化为流畅而灵巧的动作? 周二在 CoRL 上,Andy 和 Will 将介绍 Flow Reversal Steering:一种把 VLM“提示”传递给扩散 VLA 的方法。
我们在伯克利的多个研究项目中使用了OmniVLA导航模型。今年早些时候,Noriaki弄清了如何通过边缘+远程推理的组合让它实时运行! https://asyncvla.github.io 明天来看看Noriaki关于此的演讲!
周二来 CoRL 看 RLT 的报告!Charles 将讲解如何用样本高效的真实世界强化学习来适配 VLA 模型。
Xinyi Shi 的论文指出,在 Sintel 协议下,一条不含图像的匀速直线轨迹的平均 ATE 低于 11 个近期模型中的 10 个,也低于 110 个已发表方法中的 85 个。
在10组GNSS参考航拍、ETH3D、EuRoC及30个IMC 2025场景上测试表明,标准留出法自验证得分饱和:40次抽稀重建中均为1.00,而同一航拍内相机位置误差相差可达5.9倍,对226台相机仅1台在5米内的损坏模型仍给1.00。改用已验证匹配的对应关系后,18次损坏运行中14次得分低于0.95,标准形式仅4次。该测试无法发现所有重建都重复的误差,也不能替代检查点。
作者发布 FHNW Muttenz 数据集,覆盖连续 10 km 街道网络、两次相隔约 1.5 年的移动测绘采集,真值位姿位置精度 6-9 mm、姿态误差低于 0.1°。基于该数据集系统评测稀疏特征视觉定位,白天影像与预标定相机下中位平移误差 1-5 cm、旋转误差 0.03-0.1°。作者指出,在场景表示具备精确地理配准的前提下,视觉定位可接近测绘级 GNSS 定位精度,并提供完整姿态信息。
论文识别并形式化了物理误泛化问题:生成式序列模型用于物理域运动规划时,单条轨迹看似合理,但物理量(如行程距离、机械能)的总体分布与数据意图不符。作者用数据偏差核估计模型类别的局部误差,并预测扩散序列模型在玩具与应用轨迹生成任务中哪些物理量取值会增减。基于该机制,论文比较了修改数据集与生成接口的干预,并提出变换生成器学习与采样坐标系来减少物理量漂移。
RigidFormer 是一个以物体为中心的 Transformer 模型,可从点云等无网格输入学习刚体动力学,并支持可控积分步长。它用紧凑锚点推进每个物体,通过 Anchor-Vertex Pooling 补充局部顶点特征,并用可微 Kabsch 对齐把更新投影到刚体流形上。
BLaFA 提出一个语言驱动的功能灵巧抓取框架,把自然语言指令转换为操作约束语义六元组,并定位3D功能接触关键点,再映射为手腕位姿与手指关节和力指令。研究在100条开放词汇指令、覆盖四类功能意图的14组任务-工具组合以及真实机器人实验中验证了该框架。代码将公开。
论文分析前向-后向(FB)表征中连续环境高秩转移动态与低秩瓶颈之间的谱失配,提出用时间抽象缓解该问题。作者从转移算子的谱性质出发,说明时间抽象相当于低通滤波器,抑制高频分量、降低后继表示的有效秩,同时保持值函数误差的正式界。实验显示这种对齐是高折扣因子下稳定 FB 学习的关键因素。该工作已被 NeurIPS 2026 接收。
DexHOT 将灵巧操作表述为手物构型迁移,从合成可行构型对中学习可复用的关系条件迁移原语,无需人类参考动作。在包含 120 个物体的 DexHOTBench 上,单一策略对已见物体迁移成功率为 80.5%、未见物体为 69.4%;在真实灵巧手上完成 200 次迁移,成功率 61.5%,六个示范引导任务的任务成功率为 90%。
作者提出 behavior graphs,将策略 rollout 压缩为一张可解释的有向图,通过识别相似行为模式、按时间连接并关联结果来构建。
RoboFQE 提出一种基于离线轨迹的视觉机器人策略评估器,无需真实执行、仿真器或世界模型推演即可估计目标策略的折扣期望回报。该方法将拟合 Q 评估与预训练视觉基础模型、学习式终止成功标注结合,在仿真与真实操作任务中给出较准确的回报估计并保持策略排序,在视频世界模型评估器受自回归预测误差影响的长时程任务上依然有效。
作者提出 LeWAM,一个在无解码器 JEPA 潜空间上端到端训练的双向 Transformer,同时支持前向、反向、逆动力学与策略预测四种模式。线性探针实验显示,LeWAM 潜空间读取机器人与物体状态优于仅前向的 Le World Model,且对视觉干扰的忽略程度与 LeWM 相当、明显优于基于重建的 WAM。
VOMMI 是一个可携带演示采集与学习框架,通过离线轨迹重建和在线视觉-运动条件化,把可携带 RGB 演示接入 VLA 后训练。R2-VO 用稀疏几何锚点精修轨迹,使身体与手部流绝对轨迹误差平均降低 24.6%;仅用可携带演示后训练的策略,基座速度误差比用机器人采集演示训练的策略低 18.2%,末端执行器平移精度相当。
作者提出Fast-TD-MPC,一个在快速策略执行与测试时规划之间自适应切换的轻量框架,把昂贵的规划留给最需要的状态。该方法在103个连续控制任务上保持有竞争力的表现,推理速度最高提升约4倍;在外部扰动下会选择性回退到规划,鲁棒性与原规划器相当。
CompVLA 是一个统一的视觉-语言-动作(VLA)框架,可从 RGB 和语言输入联合预测运动与刚度矩阵。它在常规架构上增加专门的 Compliance Expert,输出时变刚度和虚拟位移曲线,并通过几何阻抗控制执行。
研究构建仅含平面、物体和方块手的几何视觉预训练数据集,轨迹自动生成,场景无纹理与背景,让策略先接触手与物体的几何关系。作者用 ACT 在三个仿真机器人各五项操作任务及三个真实机器人任务上评估,多数组合中从几何先验微调在训练早期成功率高于从零训练,且只需少量任务示教。结果表明高度简化的几何场景也能提供跨机器人、迁移到真实任务的初始化。
一款软体机器人鼓手通过 Tap-Pull(TP)与 Micro-Pulse(MP)两种技巧实现高频鼓滚奏,并借助贝叶斯优化在数据驱动下分别调参。软体 TP 每次击打获得最高 12.25 次反弹且间隔均匀;软体 MP 抑制音量衰减,声学效率为刚性 MP 的 6.8 倍。研究对比了软体与刚性末端执行器,成果发表于 AIM 2026。