arXiv · AI· Seungyong Lee, Suhyeok Jang, Minyoung Kim, Jinwoo Shin·· 8 小时前AI 评分32
RoboTryOn:通过虚拟试穿从人类视频合成灵巧机器人演示
RoboTryOn: Synthesizing Dexterous Robot Demonstrations from Human Videos via Virtual Try-On
AI 导读
研究提出 RoboTryOn 框架,将人类视频转化为指定机器人视频,利用逆动力学模型生成动作标签用于策略学习。 在多种人形机器人实验中,使用合成数据训练的策略将新任务平均成功率从 2% 提升至 60%,无需真实机器人演示。 该方法在成本上约为遥操作数据收集的三分之一,且性能匹配纯遥操作策略。
来源:arXiv · AI · arxiv.org