跳到正文
arXiv · AI· Ruijie Zhang, Jiayin Zheng, Yequan Zhao, Liyan Tan, Ziyue Liu, Zhengyang Wang, Kunpeng Song, Nathan Zhao, Jian Yao, Yin Zhang, Zheng Zhang·· 16 天前AI 评分20

AdaIE:通过控制动作头共同适应解决VLM表征各向异性

Controlling Action-Head Co-Adaptation to VLM Representation Anisotropy

AI 导读

针对视觉-语言-动作模型(VLA)中动作头对VLM高方差维度敏感度集中的问题,提出无参数机制AdaIE。 该机制根据下游敏感度动态重加权预训练表征,在RoboCasa-GR1基准上提升成功率5.28个百分点,在5项真实操作任务中平均提升19个百分点。 研究还表明该方法能推广至扩散策略和世界模型,提升了下游任务性能。

来源:arXiv · AI · arxiv.org