跳到正文
OFweek Robotics·· 2026-08-19AI 评分73

奥克兰大学与西安交大发布Video2Knowledge框架,用单目手机视频提取机器人任务知识

RCIM2026|西安交大参与发布Video2Knowledge:一段手机视频,就能教会机器人新技能

AI 导读

奥克兰大学LISMS实验室与西安交通大学联合提出Video2Knowledge框架,从一段普通单目RGB视频中提取手与物体6D轨迹并转成机器人动作序列。系统用WiLoR恢复3D手部网格、结合OnePoseViaGen做物体追踪,并设计四阶段物理感知校正模块,操作物体位姿准确率在正面视角下从52.5%提升到59.0%。

来源:OFweek Robotics · robot.ofweek.com