arXiv · AI· Xin Liu, Xu Han, Yuxin Wang, Haoran Song, Mingjian Zhao, Lei Wang·· 7 天前AI 评分32
跨 LLM API 对话保持性测试:基于规则的信息静默丢失检测 oracle
Testing Conversation Preservation Across LLM APIs: A Rule-Based Oracle for Detecting Silent Information Loss
AI 导读
研究团队推出确定性 oracle isloss,用于检测 LLM API 翻译中的静默信息丢失。 该工具将请求映射至中间表示 ConvIR,无需参考翻译或额外模型调用,即可区分合法变更与可避免的信息丢失。
来源:arXiv · AI · arxiv.org