跳到正文
arXiv · NLP· Pume Tuchinda, Tinnakit Udsa, Peerat Limkonchotiwat·· 2026-10-21AI 评分20

TRACE: 针对文本-视觉嵌入模型的训练感知鲁棒性与挑战性评估框架

TRACE: Training-aware Robustness and Challenge Evaluation for Text-Vision Embedding Models

AI 导读

研究者提出 TRACE 框架,将 168 项任务重组为通用、适应性和挑战性三类,以评估文本-视觉嵌入模型性能。 实验显示,结合通用与适应数据可使适应性得分提升 7.67 和 7.09 分,但挑战性得分仍低于 5.0。 分析指出多语言和视觉文档任务是主要弱点,仅靠数据适应不足以解决,需方法学进步。

来源:arXiv · NLP · arxiv.org