Origami Robotics 发布 S1 技能采集手套,用于高质量灵巧操作数据
Origami Robotics 发布 S1 技能采集手套,面向高质量灵巧操作数据采集。它通过编码器记录 20 个手指关节角度,并同步采集指尖与掌心压力和腕部摄像头视频,全部对齐到同一时间轴,因此在手部被完全遮挡、视觉管线失效时仍能持续测量。原文称其指尖精度经验证达到毫米级。
Origami Robotics 发布 S1 技能采集手套,面向高质量灵巧操作数据采集。它通过编码器记录 20 个手指关节角度,并同步采集指尖与掌心压力和腕部摄像头视频,全部对齐到同一时间轴,因此在手部被完全遮挡、视觉管线失效时仍能持续测量。原文称其指尖精度经验证达到毫米级。
TrackDeform3D是一个仅用RGB-D相机即可负担得起且自主的可变形物体3D数据集采集框架,通过识别3D关键点并结合运动一致性约束鲁棒跟踪其轨迹,生成时间平滑、几何一致的数据。
论文提出集体经验学习(CEL)范式,让部署中的机器人把自身执行经验汇总起来更新共享策略,再返回车队使用。其实现方式为失败引导经验检索微调(FERT),用失败上下文从成功轨迹中检索相关片段并优先用其记录动作做监督更新,无需额外专家演示或纠正动作;配套的容错异步训练系统(FATS)协调机器人执行、云端推理与策略优化。
推荐理由:论文提出用部署机器人自身执行经验替代专家纠正来迭代策略,并给出96台机器人规模下的实机操作结果。
Lambda-humanoid Team 发布人形机器人全身移动操作基础模型 λ0,并推出 500 小时开放世界人类移动操作数据集 HumanVerse,将第一人称视频与同步的身体和手部动作配对。
研究团队介绍RoboCap,一顶250克、配六相机与双IMU的头戴设备,用于野外第一人称数据采集,并配套设备无关的3D算法套件Grounded API。报告展示了硬件、标定与3D算法如何配合,在公开基准上取得当前最佳表现,涵盖多种场景与设备下的SLAM、第一人称深度估计,以及适配第三方设备后的手部跟踪。
论文发布 Hilti-Trimble-Oxford 数据集,采集自活跃施工现场,包含30条视觉惯性序列,覆盖10个楼层、跨度8个月,涵盖光照变化、移动工人、快速运动和重复结构等真实挑战。真值轨迹由刚性连接在360相机上的高精度激光惯性SLAM系统采集。作者还报告了配套开放研究挑战的结果,SLAM赛道有62支队伍参赛,而楼层平面定位仅22支,显示后者受关注较少。
μ0 是一个基于3D轨迹的可扩展世界模型,不预测密集像素也不直接建模动作,而是预测物体、工具、手部和接触区域等显著交互点的平滑3D轨迹,形成与本体无关的紧凑运动接口。
WARPED 是一个从人类演示视频合成逼真腕视角观测与动作的框架,仅用单目 RGB 数据即可训练视觉运动策略。系统利用视觉基础模型初始化交互场景,通过手-物交互管线跟踪手与被操作物体并将轨迹重定向到机器人末端执行器,最后用 Gaussian Splatting 合成照片级腕视角观测直接训练策略。
研究提出农业机器人视觉语言导航基准 A2A,含 6 类农业场景共 1,560 个片段,采用分步指令与连续动作环境。评测发现现有 VLN 方法在短指令上表现良好、长指令上表现较差,为此提出将复杂指令分解为简单子任务列表的 STL 模块并集成到 NavGPT 主干,SR 从 0.33 提升到 0.47,NE 从 2.76 m 略增至 2.91 m,另附消融研究与案例分析。
AgiBot World Colosseo 介绍 AgiBot World 大规模操作平台,包含超过 100 万条轨迹、覆盖 5 种部署场景下的 217 项任务,数据规模较现有数据集提升一个数量级,并采用带人工在环校验的标准化采集流程。
一项研究提出在视觉便携式管线中引入激光指示器,用于多物体场景下的目标消歧,以支持上肢假肢的抓取选择与预成形。该方法通过混合现实策略复用已有高质量分割掩码生成训练图像,并重新训练深度卷积神经网络。实验结果显示,目标消歧精度相比现有方案最高提升 9%,同时保持计算成本不变。
该研究考察世界模型在物理条件超出训练分布时的预测退化问题,比较了预测器可用输入与机制计算方式两个因果建模要素。在带捷径特征的合成基准上,基于配对干预导出的冻结依赖掩码将全连接预测器的分布外RMSE从1.769降至0.697,接近生成器oracle掩码的0.694。
PhysiCalWorld 提出通过上下文提示(in-context prompting)对动作条件世界模型进行物理校准,无需微调或解析物理建模,以适配实例级动力学。
作者提出 ASTEROID,一个学生-教师监督学习框架,让学生在同策略收集的部分可观测上下文上接受特权专家的动作标注,从而学会测试时探索。在 11 个环境(含离散探索基准、机器人操作、导航和 Procgen)中,固定探索预算下回报约为 2 倍,交互量比强化学习基线少约 100 倍,并在探索上超过前沿模型。该方法还把仿真训练的策略迁移到视觉受限的真实机器人操作,成功率比标准蒸馏提升 40%。
研究在仿真 Unitree G1 上用同一配方训练 12 个策略,变化重力、地形几何与地面接触模型(刚性或三维阻力理论 3D RFT),并测试地球到月球微调与重力随机化。
DONIC 是首个跨操作类别与人体动作来源联合训练的通用双臂灵巧跟踪器,同时发布多视角数据集 BiHOI,含 1,575 段序列、覆盖 229 个物体,重建的交互被重定向为机器人参考。
arXiv 论文将物理 AI 的零样本泛化形式化为对部署分布的覆盖,指出同一采集者增加样本只能缓慢缩小未见区域,而每新增一位贡献者都能扩展覆盖。基于此,论文提出融合多模态对齐、生成式增强与噪声标签学习的机器人动作共享潜空间,并建议开发者围绕标准机器人 Origmi 构建应用以提供多样化数据,最后给出关联实机零样本成功率与数据多样性的可检验假设及评测协议。
SpatialDex 是一个从纯 RGB 人类视频学习 3D 接地双臂灵巧操作的框架,通过重建增强的视觉运动预训练,同时学习人类行为及其空间上下文。它从每段视频重建场景几何并估计手部运动,用 3D 手部估计的手尺寸先验在视频级尺度上对齐二者,并将重建几何同时作为策略输入和预测目标。
AirPlayground 是一个用于训练和评测空中导航策略的统一基准,构建了 94 个覆盖室内、城市户外和植被场景的写实 3D Gaussian Splatting(3DGS)环境,并配有对齐的碰撞几何。
论文提出PRISM框架,将深度噪声解耦为传感失效(sensing invalidation)与测量不准(measurement inaccuracy)两类模态,并蒸馏3D视觉基础模型特征作为空间-语义先验。
作者提出 TIDE(Training In DEployment),一种人机在环在线后训练系统,用来源条件监督学习框架从部署中的人类干预和策略 rollout 在线更新策略,不需要学习 critic、奖励模型或动作评分器。
SMR 是一种从语义条件物理专家学习的流式神经运动重定向器,将人体运动转成机器人任务空间目标,由物理专家在仿真中跟踪,再用严格因果 Transformer 学习其执行轨迹。每个新帧仅用当前与过去的人体观测生成机器人运动参考,供下游全身控制器使用。实验显示语义条件物理专家在语义保真度和物理有效性上优于直接优化式重定向,所得流式重定向器在统一全身控制器下闭环表现优于运动学与物理精修基线。
SimPT 是一个自动化仿真框架,将策略 rollout、纠正数据采集、策略训练与独立评测整合,用于基于人工介入的视觉-语言-动作(VLA)后训练。
HyperDrone 是一款面向高性能批量渲染的四旋翼仿真器,速度比现有最先进的批量四旋翼仿真器快 20 倍以上。
COWBOY是一个用于学习上下文全身操作的可扩展sim-to-real框架,在全身灵巧抓取任务上零样本迁移到数百个物体和多种野外场景,包括杂乱桌面、货架、抽屉等非结构化环境。
Real2Sem2Real(R2Sem2R)提出一条真实-语义-真实流程,将单条单目RGB人类演示视频转化为覆盖同一类别下多个语义物体实例的数千条机器人演示。该方法用DINOv3蒸馏的高斯泼溅跟踪物体SE(3)位姿,性能超过现有方法和使用估计度量深度的FoundationPose,并将人手映射为可迁移到数字孪生体的可行机器人抓取。
论文提出 DONIC,一个跨操作类别与人类动作来源联合训练的通用双臂灵巧跟踪器,并发布多视角数据集 BiHOI,含 1,575 段序列、覆盖 229 个物体,强调持续的双臂交互并将重建交互重定向为机器人参考。
英伟达CEO黄仁勋在巴黎宣布对四家法国初创企业进行新一轮战略投资,覆盖医疗科技、化学材料、商业规划与机器人领域,其中Genesis AI是唯一的机器人标的,正以约30亿美元、约合200亿元人民币估值洽谈新一轮融资。
Dual Exam 基准将多模态智能体与世界模型分开评测:智能体轨在固定环境响应机制下比较 10 种配置、覆盖 1,088 个条目和 15 个报告类别,世界模型轨包含 8 个场景的 400 个案例。
研究检验预训练 LeWorldModel(LeWM)对小幅动作变化的复现程度,在 Reacher 与 OGBench Cube 近千个状态上,用 Gram 矩阵在三种扰动尺度下测量动作敏感性。
仙工智能(SEER Robotics)展示其机械臂在无人工干预下完成从取手柄、接粉、布粉、压粉、锁手柄、萃取到清洗的全流程咖啡制作,这是该公司迄今演示的最长多步骤机器人咖啡任务。
Agile Robots 在 NVIDIA GTC Berlin 与 Audi 合作展示用 Dassault Systèmes 的 DELMIA 虚拟孪生,在部署前评估移动人形机器人在生产物流系统中的表现。
一位 Reddit 用户用 320×240 epc660 级 iToF 工程样片、固定 Pi 相机和 Ouster 参考扫描搭建家用 RGB + iToF 深度方案,曝光从 500 提到 2,000 µs 后滤波抖动从 65 降到 6 mm、原始抖动从 85 降到 28 mm,但直墙仍弯曲 12–14 cm,三个调制频率对同一面墙分别报 4.14、3.92、3.97 m。
Kinetix AI 推出面向具身智能(embodied AI)的第一人称人体数据方案,核心是轻量级头戴式数据采集设备 KAI Halo,结合多模态数据采集与边缘-云端 AI 能力,将真实人体活动转化为高质量训练数据。
大晓机器人(ACE ROBOTICS)发布视觉空间锚定增强型具身基模型ACE-Brain-0.6,聚焦Grounding能力,在八项Grounding评测中六项超越GPT-6 Astra,七项公开基准平均得分74.53(Astra为73.68),自建真机评测集RobotGrounding(2591道问题、14类任务)得分94.13(Astra为91.10)。
差评君赴重庆与胜通能源、七腾机器人工程师交流,介绍了面向高危工业巡检的元域智巡方案。该方案先用基于3D高斯等重建技术在电脑中构建数字工厂,由大模型自动识别仪表。
意大利深科技公司 Generative Bionics 在 CES Unveiled Milan 宣布,计划建设多站点的专有物理 AI 数据工厂网络,首座占地 5,000 平方米的枢纽落地意大利,预计 2027 年第四季度投运,之后在欧洲其他地区和全球市场各建一座。
黄仁勋在GTC柏林演讲中宣布英伟达与Agile Robots推出参考人形机器人Agile ONE SN,身高1.4米、体重40公斤、31个自由度,预置Isaac GR00T模型、由Jetson Thor驱动,预计2027年初上市,用于把机器人研究的软硬件搭建时间从几周缩到几天。
英伟达在GTC柏林2026大会上扩展Isaac机器人开发平台,正式可用的Isaac Lab 3.0支持多GPU训练并接入Newton、PhysX等物理引擎,开源运行框架Isaac OS负责连接AI模型、传感器、控制系统和机器人硬件。
2026 物理 AI 与世界模型大会在南京开幕,爱思科技(Agnes AI)在展区展示自研智能体运行框架 Agnes Harness,通过设备接入协议 MHS 将全模态模型能力延伸至机器狗 Go2、机器人小车 Car01 等硬件。