Robbyant 具身智能挑战赛吸引超 1800 支队伍,决赛将于上海举行
Robbyant 主办的具身智能挑战赛线上初赛于 10 月 27 日截止,共有来自 13 个国家的 1800 多支队伍、数千名开发者报名。比赛基于开源具身基础模型 LingBot-VLA 2.0,考察模型训练与微调、仿真泛化及真机适配,现场决赛将于 11 月 14 日至 16 日在上海以真机黑客松形式举行。
Robbyant 主办的具身智能挑战赛线上初赛于 10 月 27 日截止,共有来自 13 个国家的 1800 多支队伍、数千名开发者报名。比赛基于开源具身基础模型 LingBot-VLA 2.0,考察模型训练与微调、仿真泛化及真机适配,现场决赛将于 11 月 14 日至 16 日在上海以真机黑客松形式举行。
Boston Dynamics 控制工程师 Andy Wu 介绍,团队把 Atlas 的脚换成轮子做研究测试台,用全身强化学习策略驱动,目的是在极限工况下检验执行器与电机模型。
推荐理由:Atlas 团队控制工程师复盘换轮测试台如何用真实电机模型缩小 sim2real 差距,可迁移到全身 RL 训练。
Tutor 推出 TRACE,用部署时计算扩展机器人学习:从少量 Tutor 演示出发,前沿大语言模型智能体在仿真中重建任务,并训练出可靠、达到人类速度的策略。TI-0.1 是首个用 TRACE 训练的模型。USV 认为这进一步说明现场部署机器人会加速学习,每次部署都产生训练数据,Tutor 由此获得让机器人学习持续累积的新方式。
NVIDIA 在 CoRL 发布基于 Cosmos 构建的开放世界动作模型 GR00T 2,并推出 Isaac Lab 3.0、Isaac Lab-Arena 0.4 及 DexBench、VABAR 等基准。
推荐理由:NVIDIA 在 CoRL 集中放出 GR00T 2、Isaac Lab 3.0 与多个基准,读者可据此了解仿真训练与评测工具链的最新变化。
Dexmate 让 Codex(GPT-6 Astra)和 Claude Code(Opus 5.5)通过 MCP 工具控制 Vega 轮式双臂移动操作机器人,水果入篮和开门任务全部成功,精度更高的碗架任务在原始工具接口下无一成功。
推荐理由:Dexmate 用 Codex 和 Claude Code 实测机器人任务,量化了动作之外的时间开销与安全响应缺口。
UC Berkeley 与 NVIDIA 在 CoRL 2026 上联合提出 agentic robotics 方法,把机器人编程从数据问题转为编码问题:用大语言模型驱动的编码智能体分解任务、生成代码,并在仿真中迭代调试。
UC Berkeley的Ken Goldberg团队与NVIDIA机器人工程负责人Spencer Huang提出“agentic robotics”方法,让AI智能体在仿真中生成、测试并修正机器人控制程序,无需额外采集数据。
推荐理由:报道介绍了用多智能体在仿真中生成、测试并修正机器人程序的方法,并给出仓储分拣的落地数据。
具身智能数据采集围绕遥操作架构与 Demonstration 数据管线展开,讲解如何通过遥操作采集演示数据。内容聚焦数据采集实战流程,涉及遥操作架构搭建与演示数据管线的组织方式。
开发者用 MuJoCo 为双足机器人原型搭建的强化学习训练已跑通,此前调试难度较大,目前效果尚不完美但已取得进展。该进展属于仿真环境中的原型验证,尚未涉及实机测试。
世界模型赛道正从追求通用世界模型转向垂直场景落地,多家初创公司在工业、物流、巡检等场景开展验证。日冕开物将Gravity 4D世界模型用于服务器制造产线,在远图ICT测试工位完成POC验证,成功率超过99.5%,换型时15分钟完成新物料学习与作业切换。文章还提到ICL上下文学习被珂珂矩阵、流形空间、本溯智能等企业列为攻克目标,以支持机器人在真实场景中快速适应新任务。
光学动捕为人形机器人和无人机的训练与硬件验证提供独立位置参考,通过同步相机三角测量反光或主动标记,而非累积先前读数推算运动。人形训练中,人体动作经重定向转为机器人关节结构下的全身控制参考,UC San Diego 在 RSS 展示的 Expressive Whole-Body Control 用重定向动捕数据训练策略并在仿真与硬件上评估。
文章讨论 ROS2 移动机器人仿真中仅注入高斯白噪声为何不足以验证融合算法,聚焦零偏、尺度、安装失准这类无法被滤波平均的系统误差,并给出给 odom、雷达、IMU 注入系统误差的完整做法。
苹果研究团队公开HALO人形机器人研究,以宇树G1为身体、背负运行千问模型的Mac mini M4 Pro,在6个未扫描的真实家庭中完成坐下、钻桌底、推箱子等任务,360次测试平均成功率91%。
同一新闻,精选展示《苹果公开 HALO 人形机器人研究:宇树 G1 背 Mac mini 跑千问,陌生家庭任务成功率 91%》
2026年下半年具身智能融资降温之际,Maxinsights、景烁科技、简智机器人在十天内分别完成3000万美元种子轮、数千万美元Pre-A轮和1亿美元A+轮融资。三家公司均不做整机,核心团队带有自动驾驶数据闭环背景,分别以全球采集网络、文远知行拆分的数据平台和多模态采集产线切入数据供给。文章指出数据量不等于数据价值,长期竞争力取决于数据生产与跨本体复用能力。
NVIDIA 与韩国多家行业龙头合作推进物理 AI 落地,覆盖半导体制造、自动驾驶和机器人。LG 电子与 NVIDIA 在真实制造环境中用 Isaac GR00T 驱动 CLOiD 机器人完成操作与制造任务,并搭建了连接真实数据采集、Cosmos 数据增强、GR00T 模型训练、Jetson AGX Thor 端侧计算和仿真评估的数据闭环。
作者发布 FHNW Muttenz 数据集,覆盖连续 10 km 街道网络、两次相隔约 1.5 年的移动测绘采集,真值位姿位置精度 6-9 mm、姿态误差低于 0.1°。基于该数据集系统评测稀疏特征视觉定位,白天影像与预标定相机下中位平移误差 1-5 cm、旋转误差 0.03-0.1°。作者指出,在场景表示具备精确地理配准的前提下,视觉定位可接近测绘级 GNSS 定位精度,并提供完整姿态信息。
论文识别并形式化了物理误泛化问题:生成式序列模型用于物理域运动规划时,单条轨迹看似合理,但物理量(如行程距离、机械能)的总体分布与数据意图不符。作者用数据偏差核估计模型类别的局部误差,并预测扩散序列模型在玩具与应用轨迹生成任务中哪些物理量取值会增减。基于该机制,论文比较了修改数据集与生成接口的干预,并提出变换生成器学习与采样坐标系来减少物理量漂移。
RigidFormer 是一个以物体为中心的 Transformer 模型,可从点云等无网格输入学习刚体动力学,并支持可控积分步长。它用紧凑锚点推进每个物体,通过 Anchor-Vertex Pooling 补充局部顶点特征,并用可微 Kabsch 对齐把更新投影到刚体流形上。
DexHOT 将灵巧操作表述为手物构型迁移,从合成可行构型对中学习可复用的关系条件迁移原语,无需人类参考动作。在包含 120 个物体的 DexHOTBench 上,单一策略对已见物体迁移成功率为 80.5%、未见物体为 69.4%;在真实灵巧手上完成 200 次迁移,成功率 61.5%,六个示范引导任务的任务成功率为 90%。
作者提出 behavior graphs,将策略 rollout 压缩为一张可解释的有向图,通过识别相似行为模式、按时间连接并关联结果来构建。
RoboFQE 提出一种基于离线轨迹的视觉机器人策略评估器,无需真实执行、仿真器或世界模型推演即可估计目标策略的折扣期望回报。该方法将拟合 Q 评估与预训练视觉基础模型、学习式终止成功标注结合,在仿真与真实操作任务中给出较准确的回报估计并保持策略排序,在视频世界模型评估器受自回归预测误差影响的长时程任务上依然有效。
VOMMI 是一个可携带演示采集与学习框架,通过离线轨迹重建和在线视觉-运动条件化,把可携带 RGB 演示接入 VLA 后训练。R2-VO 用稀疏几何锚点精修轨迹,使身体与手部流绝对轨迹误差平均降低 24.6%;仅用可携带演示后训练的策略,基座速度误差比用机器人采集演示训练的策略低 18.2%,末端执行器平移精度相当。
研究构建仅含平面、物体和方块手的几何视觉预训练数据集,轨迹自动生成,场景无纹理与背景,让策略先接触手与物体的几何关系。作者用 ACT 在三个仿真机器人各五项操作任务及三个真实机器人任务上评估,多数组合中从几何先验微调在训练早期成功率高于从零训练,且只需少量任务示教。结果表明高度简化的几何场景也能提供跨机器人、迁移到真实任务的初始化。
作者提出 LAG-Fusion,一个面向异步多模态扩散策略组合的延迟感知引导融合框架,允许各模态策略按自身推理速率运行,并在有输出时提供去噪引导。为保持异步组合一致,作者在相对动作表示下推导了扩散变量的参考系重基规则,使延迟到达的引导在融合前完成对齐。作者在接触密集操作中把低频视觉策略与高频力策略组合,异构模态延迟实验显示其响应性与任务表现优于同步融合和专门设计的力感知基线。
作者提出 DexTeleop-0 双臂灵巧遥操作框架,用指尖触觉反馈在人类跟踪指令上叠加机器人侧接触修正,以缓解运动学映射误差和仅靠视觉无法调节接触力的问题。该方法通过接触刚度近似与运动学雅可比实时计算局部修正,并加入逐接触力跟踪、预测接触力矩软正则和有界手部关节残差。
作者提出SGM-SLAM分布式SLAM框架,面向GPS拒止、通信受限环境下的多机器人协同,机器人可各自独立初始化坐标系且仅共享有限空间重叠。该方法用融合RGB-LiDAR点云构建包含语义分割点云层与离散有界物体层的场景图,并通过与邻近机器人交换和匹配物体数据完成协同匹配,采用多步数据交换与优化提升通信效率。作者在含有限轨迹重叠、视角变化、重复结构和视觉退化条件的真实数据集上验证了效果与通信效率。
CLAW 是一个全端到端自监督框架,可直接从无动作标注的视频中联合学习世界模型与连续潜在动作表示。它用对抗式潜在正则化防止潜在变量编码未来观测,使潜在变量捕捉动作结构,并以扩散模型把环境动态建模为未来观测的分布而非单次确定性推演。作者称该潜在动作世界模型支持从观测做模仿学习与目标导向规划,并在多任务、多本体实验中优于现有方法。
作者提出 ObjView-Bench 评测框架,用于物体中心视角规划,把全向自遮挡、观测饱和难度和基于集合覆盖的规划难度三者拆开。该框架还设计了面向部署的评测协议,显示预算条件与可达视角约束会明显改变经典、学习和混合规划器的方法排名与失败模式。论文已被 NeurIPS 2026 接收。
作者提出 XIT,一种基于采样的规划器,把主动气体分布建图(GDM)建模为下一最优轨迹的信息路径规划问题,用单棵共享树同时朝多个前沿目标生长,并在途中进行信息性气体采样。
作者提出视觉学习距离(VLD)框架,将图像目标导航的感知学习与策略学习解耦:先在约3000小时互联网与仿真视频上自监督训练距离到目标预测器,再在仿真中用GeoNoise扰动特权几何距离训练强化学习策略,部署时零样本使用VLD预测。
ManiTaskGen 是一个可为任意给定场景自动生成全面、多样且可行的移动操作任务的系统,任务同时包含过程式具体指令(如把物体从 X 移到 Y)和结果式抽象指令(如表清空)。作者在仿真和真实场景中验证了生成任务的有效性与多样性,并用这些任务自动构建基准,通过接地技能接口评测基于现有视觉语言模型(VLM)的智能体的高层具身决策,还提出一种利用这些任务提升具身决策的简单方法。代码已公开。
Augmentron 是一个几何感知的数据增强管线,通过生成可复用的场景表示并按录制的相机位姿渲染,产出在时间和多视角上一致的环境与工作空间变化,同时保留机器人、任务物体、动作和标注。
Open-HumanWAM 发布首个完全开放的 5 万小时第一视角人类视频预训练方案,核心是带手部动作与自然语言标注的 Open-HumanWAM-50K 语料。
作者提出 Seeing What Matters 基准,用于在仿真桌面操作中评测任务条件的可操作空间信念,覆盖咖啡工作站、抽屉柜和微波炉三类场景共 860 个冻结评测用例,扩展后超过 115000 个评测回合。
研究团队开发了一款可穿戴触觉输入输出设备,将36通道电触觉阵列与电容触摸传感集成,使刺激位置与用户报告的感知位置能在同一身体参考坐标系中对齐。24名参与者的实验显示,电触觉与热触觉感知图存在明显的个体差异,但两种模态在参与者间保留了电极对特定的空间结构。
SURE 是一个数据高效的视觉-语言-动作(VLA)训练框架,通过轻量转置卷积概率动作解码器建模空间不确定性,并用 Soft-DTW 对齐监督适应演示中的时间差异。在 LIBERO、RoboTwin 2.0 和真实操作任务上,仅用 10% 示教数据或 20% 训练步数,SURE 的操作成功率即可匹配或超过基线 VLA。
研究将粒子图像测速(PIV)的相机布位建模为序列决策问题,训练强化学习智能体控制搭载相机的 6 自由度机械臂,在水洞中定位、取景并解析水翼尾流。智能体仅通过时间分离图像对估计的速度场与不确定性观察场景,全部在基于 CFD 生成不同翼型、位置和攻角尾流的光真实感仿真中训练。
MDF++ 是一个视触觉世界动作模型,用扩散骨干网络端到端学习多感官观测的潜在表征,以解决现有世界动作模型依赖冻结预训练编码器、表征不适配控制的问题。作者提出多任务学习策略,利用跨模态相关性学习任务相关表征,避免朴素联合训练导致的特征坍缩。在包含真实螺栓拧紧与螺母对位的接触密集操作任务上,其表现比基于冻结预训练表征的世界动作模型高出最多 50%。
研究提出一种闭环设计方法,联合优化四旋翼几何与两条被动折叠臂的扭矩-形变响应,以仿真中接触式窄缝穿越的成功率作为反馈信号采样更优设计。原型机宽度从31.3 cm被动收窄至14.1 cm,以2 m/s参考速度穿越15 cm宽开口,可容忍30度以内的接近角误差,并能折叠通过40 cm长的受限通道。与刚性对照相比,软构型在无接触飞行中仅增加2 mm位置RMSE和不到1%的电功耗。
研究提出执行接地可通行性(EGT),将其定义为车辆-控制器组合执行候选路径并满足轨迹级跟踪与进度要求的概率,用潜空间流匹配模型预测闭环轨迹分布。在650次未见地形仿真试验中,EGT将安全路径误拒率降至2.2%(姿态裕度与力角基线为11.4%-39.5%),不安全路径误接受率为7.7%。