跳到正文
arXiv · AI· Nguyen Khoi Hoang, Shuhaib Mehri, Tse-An Hsu, Yi-Jyun Sun, Quynh Xuan Nguyen Truong, Khoa D Doan, Dilek Hakkani-T\"ur·· 2026-10-06AI 评分26

PSI-Bench:可解释且具临床意义的抑郁症患者模拟器评估框架

PSI-Bench: Interpretable and Clinically Meaningful Evaluation of Depression Patient Simulators

AI 导读

研究者推出 PSI-Bench,一个可在轮次、对话和人群三个层面自动评估抑郁症患者模拟器行为的框架,并对两个模拟器框架下的七个 LLM 进行基准测试。 测试发现模拟器回复过长、词汇过于多样、变异性偏低,且过快推进治疗阶段并转向正向情绪;模拟框架对保真度的影响大于模型规模。 人类研究显示该基准与心理健康专业人员的判断高度一致,为未来模拟器设计与评估提供了可解释、可扩展的基准。

来源:arXiv · AI · arxiv.org