跳到正文
arXiv · AI· Seungyong Lee, Suhyeok Jang, Minyoung Kim, Jinwoo Shin·· 8 小时前AI 评分32

RoboTryOn:通过虚拟试穿从人类视频合成灵巧机器人演示

RoboTryOn: Synthesizing Dexterous Robot Demonstrations from Human Videos via Virtual Try-On

AI 导读

研究提出 RoboTryOn 框架,将人类视频转化为指定机器人视频,利用逆动力学模型生成动作标签用于策略学习。 在多种人形机器人实验中,使用合成数据训练的策略将新任务平均成功率从 2% 提升至 60%,无需真实机器人演示。 该方法在成本上约为遥操作数据收集的三分之一,且性能匹配纯遥操作策略。

来源:arXiv · AI · arxiv.org