arXiv · NLP· Ha Lan N. T, Minh-Anh Nguyen, Dung D. Le·· 6 小时前AI 评分36
提出 LAnR 框架:基于潜空间抽象的检索增强生成方法
Latent Abstraction for Retrieval-Augmented Generation
AI 导读
研究提出 LAnR 框架,让单个 LLM 在自身潜空间内完成编码、检索与生成,替代传统 RAG 中检索器与生成器的分离架构。 该框架利用指定 [PRED] token 的隐藏状态生成稠密检索向量,并通过 MLP 控制头根据答案 token 熵值自适应判断检索充分性,消除显式停止推理。
来源:arXiv · NLP · arxiv.org