跳到正文
热点事件持续更新

Jev模型临床分诊概率校准与决策准确性评估结果发布

1 篇报道1 个报道来源6 小时前更新

先了解这件事

AI 综述

Liang You等人发布论文,评估Jev等模型在CARE-Bench基准上的校准表现。实验覆盖439个公开案例的925个决策点,对比Jev与四个通用语言模型及三个基线。Jev在CARE-Bench上的宏观F1分数为0.461,在多分类Brier分数上表现最低,数值为0.610。在453个HealthBench对话测试中,Jev的Brier分数再次最低,达到0.299,但在四动作任务中混淆了概率误差与澄清需求识别。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月20日
  1. arXiv · ML
    Jev 临床分诊模型校准与决策准确率评估

    Jev 决策模型在 CARE-Bench 上 macro-F1 排名第五中第四(0.461),多分类 Brier 分数最低为 0.610。 在 453 个 HealthBench 对话测试中,Jev 的 Brier 分数再次最低(0.299),但在四动作任务中混淆了概率误差与澄清需求识别。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。