arXiv · ML· Yaru Niu, Binghong Chen, Changwei Yao, Shangtao Li, Zhenlong Fang, Revanth Krishna Senthilkumaran, Shuai Zhou, Yuemin Mao, Kalie Ching, Po-Ju Chao, Yudong Luo, Peiqi Yu, Heng Zhang, Hao Zhang, Bingqing Chen, Chen Qiu, H. Eric Tseng, Ye Yuan, Umar Iqbal, Changliu Liu, Jonathan Francis, Ding Zhao·· 7 天前AI 评分30
EgoX:通过具身梦境实现以自我为中心的跨具身操纵
EgoX: Egocentric Cross-Embodiment Manipulation with Embodiment Dreaming
AI 导读
EgoX框架利用具身梦境训练MXT+,在13个任务-具身组合上将平均归一化任务进度从0.63提升至0.80。 MXT+采用模块化跨具身Transformer架构,通过共享主干和专用编码器/专家,预测未来视觉与本体感觉状态以增强动力学建模。 该方法在分布外条件下显著有效,将平均任务进度从0.53提升至0.77,验证了跨具身预训练的优势。
来源:arXiv · ML · arxiv.org