跳到正文
arXiv · NLP· Yancheng Zhu, Yifan Yuan·· 3 小时前AI 评分33

StateTrack-Bench 揭示长对话中 LLM 状态完整性崩溃特征

When LLMs Forget What They Believe: Characterizing State Integrity Collapse in Long-Horizon Dialogues

AI 导读

研究提出 StateTrack-Bench 基准,发现大模型在长对话中出现“状态完整性崩溃”,即保留约束记忆但停止应用。 在 7 个模型快照上,联合保持率介于 62.4% 至 100.0% 之间;88.6% 的失败源于行为漂移而非遗忘。 结构化状态锚定(Structured State Anchoring)在不可变约束上最多可恢复 24.4 分,表明单轮遵循无法推断长程可靠性。

来源:arXiv · NLP · arxiv.org