HuggingFace Daily Papers·· 7 天前精选AI 评分78
RoboTryOn：用虚拟试穿将人类视频合成为灵巧机器人演示
RoboTryOn: Synthesizing Dexterous Robot Demonstrations from Human Videos via Virtual Try-On
AI 导读
RoboTryOn 提出把人类到机器人的转换视为虚拟试穿，保留演示动作、将人替换为参考图指定的目标机器人，并保持任务、物体和背景不变。方法自回归转换关键帧引导视频合成，运动以人手骨架为条件，再用融合深度特征的逆动力学模型（IDM）从合成视频推断动作标签用于策略学习。
推荐理由
提出用虚拟试穿思路把人类视频转成机器人演示，在无真机示教下把新任务成功率从2%提到60%。
来源：HuggingFace Daily Papers · huggingface.co