跳到正文
arXiv · AI· Simon A. Lee, Jiahang Sha, Moonseong Jeong, Yunbei Pan, Jeffrey N. Chiang·· 5 小时前AI 评分28

MedJev:医学领域零样本 System One 决策模型评估

MedJev: Evaluating Zero-Shot System-One Decision Making in Medicine

AI 导读

MedJev 在 MedQA、USMLE 和 NEJM 基准测试中分别取得 72.5%、75.4% 和 80.1% 的准确率,接近 GPT-4 表现。 该开源模型支持本地运行,在患者住院死亡率预测中 AUROC 达 0.926,超过 XGBoost;通过两参数重校准方法可将 ECE 降至 0.007。

来源:arXiv · AI · arxiv.org