跳到正文
arXiv · AI· Junwei Yao, Yongxi Zhou, Zike Yang, Zhijun Wang, Jianan Liu, Yanxian Chen, Wenbo Ye·· 4 小时前AI 评分23

评估上下文压缩对后续问题的影响:gpt-6-luna 与 LLMLingua-2 表现

Evaluating Context Compaction on the Questions That Come Later

AI 导读

研究发现,针对当前问题筛选句子的方法在后续 MultiRC 问题上并不优于随机删除。 LLMLingua-2 忽略问题语境,在后续 MultiRC 问题上比随机句子删除高 12.5 分;gpt-6-luna 虽提升当前问题准确率,但对后续问题无显著增益。 压缩时的表现无法可靠预测其对后续问题的服务能力。

来源:arXiv · AI · arxiv.org