跳到正文
arXiv · AI· Xin Liu, Xu Han, Yuxin Wang, Haoran Song, Mingjian Zhao, Lei Wang·· 7 天前AI 评分32

跨 LLM API 对话保持性测试:基于规则的信息静默丢失检测 oracle

Testing Conversation Preservation Across LLM APIs: A Rule-Based Oracle for Detecting Silent Information Loss

AI 导读

研究团队推出确定性 oracle isloss,用于检测 LLM API 翻译中的静默信息丢失。 该工具将请求映射至中间表示 ConvIR,无需参考翻译或额外模型调用,即可区分合法变更与可避免的信息丢失。

来源:arXiv · AI · arxiv.org