arXiv · AI· Byeonghun Bang, Sangwoo Park, Jinheon Baek, Kangsan Kim, Youngwan Lee, Sung Ju Hwang·· 4 小时前AI 评分40
ReTrace:通过目标导向动作回放剖析计算机操作智能体的恢复行为
Lost in Recovery: Demystifying Recovery Behavior of Computer-Use Agents via Goal-Oriented Action Replay
AI 导读
研究团队提出可缩放评估框架ReTrace,通过注入受控错误并执行目标导向动作回放,系统化研究计算机操作智能体的模型级恢复行为。 该框架定义了“转移一致性恢复”准则,即恢复后状态与目标状态执行相同下游动作必须产生相同结果。 研究发现,当前的计算机操作智能体未能利用其潜在的恢复能力,但精准的模型级恢复能带来可测量的端到端性能提升,确立了恢复能力对构建可靠智能体至关重要。
来源:arXiv · AI · arxiv.org