跳到正文
热点事件持续更新

XDecideBench 多语言决策模型基准发布

1 篇报道1 个报道来源21 小时前更新

先了解这件事

AI 综述

2026年11月3日,Marek Šuppa等人在arXiv发布XDecideBench基准,包含122种语言、88,425段文本及153,875道题目,用于评估跨语言类型化决策模型与置信度策略。 实验表明,经微调的开源模型在12种开发语言上全面超越基座Qwen模型;在数据最少的4种语言中,微调带来的准确率增益显著高于数据丰富语言,但修复错误比例相似。 此外,基于英语数据设定的5%错误率置信度阈值在德语和法语中均导致实际错误率超标,揭示了跨语言置信度策略的局限性。

AI 根据报道生成 · 58 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. arXiv · NLP
    XDecideBench:评估跨语言类型化决策模型与置信度策略

    XDecideBench 推出包含 122 种语言、88,425 段文本及 153,875 道题目评测基准。 经微调的开源模型在 12 种开发语言上全面超越其基座 Qwen 模型;Qwen 本地运行时,数据最少的 4 种语言中准确率增益显著高于数据丰富的 6 种语言,但微调修复错误比例两者相似。 基于英语数据设定的 5% 错误率置信度阈值,在 XNLI 的德语和法语中均导致实际错误率超标。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。