arXiv · NLP· Weihan Peng, Chenxu Zhang, Qianao Wang, Yuling Shi, Heng Lian, Qihong Mao, Jiahao Pang, Chunliang Feng, Bowen Li, Xiaodong Gu·· 5 小时前AI 评分35
HEART-Bench：评估LLM基于记忆的人格一致性决策能力
HEART-Bench: Do LLMs Make Persona-Consistent Decisions?
AI 导读
研究者提出HEART-Bench基准，评估LLM在拥有 autobiographical memories 时能否做出符合人格的决策。基准包含11个基于Big Five的角色、每个角色1000条记忆及64个DIAMONDS决策场景，共673道选择题。
来源：arXiv · NLP · arxiv.org