arXiv · AI· Zhou Liu, Chenxu Zhang, Ligang Huang, Zeli Su, Zewei Pan, Changhang Tian, Zhaoyang Han, Xing Chen, Yuanfeng Song, Wentao Zhang·· 16 天前AI 评分23
SkillLens:面向检索增强 GUI 动作预测与在策略蒸馏的可视化技能卡片
SkillLens: Visual Skill Cards for Retrieval-Augmented GUI Action Prediction and On-Policy Distillation
AI 导读
SkillLens 引入可视化技能卡片(VSC)框架,支持无检索部署的 GUI 代理动作预测。 在 119 个未见任务上,使用全卡片教师训练的模型步成功率比纯文本教师平均高 5.04 个百分点。 独立运行控制显示,全卡片正确动作数为 18.75%,显著优于纯文本卡片的 6.25%。
来源:arXiv · AI · arxiv.org