跳到正文
热点事件持续更新

发布 TherapyGym 评估框架与基准

1 篇报道1 个报道来源8 小时前更新

先了解这件事

AI 综述

2026年11月5日,Fangrui Huang 等人在 arXiv 发布 TherapyGym 框架。该框架基于认知治疗评估量表(CTRS)及多标签标注体系,专门用于评估心理治疗聊天机器人的临床保真度与安全性,并将评估过程转化为强化学习训练环境。框架同步开源了配套验证集 TherapyJudgeBench,该基准包含 116 段对话及 1270 条专家评分,旨在为自动化评估提供数据支持。 在实验结果方面,模型在 TherapyGym 环境中接受强化学习训练后表现显著提升。数据显示,模型的平均 CTRS 专家评分从 0.10 提升至 0.60;若采用 LLM 作为裁判进行评估,平均 CTRS 评分则从 0.16 提升至 0.59,验证了该框架在提升模型对齐效果上的有效性。

AI 根据报道生成 · 7 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. arXiv · NLP
    TherapyGym:评估与对齐治疗聊天机器人的临床保真度与安全性

    TherapyGym 框架基于 CTRS 和多标签标注评估治疗聊天机器人的临床保真度与安全性,并作为训练环境通过强化学习提升模型表现。 该框架配套发布 TherapyJudgeBench 验证集,包含 116 段对话和 1270 条专家评分。模型在 TherapyGym 中训练后,平均 CTRS 得分从 0.10 提升至 0.60。

本事件热度走势

可比范围当前
8
可比范围峰值
1011月5日 14:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。