arXiv · AI· Bingchao Wang, Yongcheng Jing, Shunyu Liu, Chengyu Wang, Jun Huang, Jie Yang, Wei Liu, Dacheng Tao·· 5 小时前AI 评分36
GUI-JEPA:基于候选条件 JEPA 潜空间的移动端 GUI 智能体快速动作策略
GUI-JEPA: Candidate-Conditioned JEPA Latents as a Fast Action Policy for Mobile GUI Agents
AI 导读
GUI-JEPA 提出首个无解码器的移动端 GUI 智能体策略,在 AndroidControl 上比 Qwen2.5-VL-7B 智能体快 2.8-4.0 倍。 该模型采用预训练于无标签 GUI 截图的 JEPA 编码器,在潜空间直接对候选动作进行评分,无需逐 token 解码,参数量仅为对比模型的 6%。 智能体达到对比模型 86-92% 的分布内准确率,代码已公开。
来源:arXiv · AI · arxiv.org