VPM世界模型联合预测视频与点轨迹
热点事件观察中
VPM世界模型联合预测视频与点轨迹
1 篇报道1 个报道来源1 天前更新
先了解这件事
AI 综述
VPM研究团队提出Video-Point Model(VPM),以多视角视频历史和语言指令为条件,联合预测任意视角的未来视频与场景持久点的3D轨迹。团队配套构建了VPM-Data仿真语料(同步多视角视频配持久点轨迹)与VP-WorldBench预测基准(覆盖仿真与真实环境)。 团队进一步把机器人动作作为生成器中的token模态接入VPM,使策略共享点监督的骨干;论文称在仿真与真实机器人实验中,该动作增强模型提升了操作成功率。
AI 根据报道生成 · 2 小时前更新
最新进展10月20日 08:00
Video-Point Model 通过点轨迹预测学习4D世界并提升机器人操作成功率报道时间线
沿着报道,了解事件的不同侧面。
10月20日
- HuggingFace Daily PapersVideo-Point Model 通过点轨迹预测学习4D世界并提升机器人操作成功率
论文提出 Video-Point Model(VPM),一个以多视角视频历史和语言指令为条件,联合预测任意视角未来视频与场景持久点3D轨迹的世界模型。作者在预训练世界模型上加入相机条件的多视角处理和轨迹预测头,并构建 VPM-Data 仿真语料与 VP-WorldBench 基准;进一步将机器人动作作为生成器中的 token 模态,使策略共享点监督的骨干。
本事件热度走势
- 可比范围当前
- 4
- 可比范围峰值
- 510月21日 12:00
- 近 24 小时变化
- –
0246
12:0013:0014:00
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。