跳到正文
arXiv · NLP· Shaoliang Yang, Jun Wang·· 21 天前AI 评分41

语言模型在已知机械极限下计算与拒绝行为的分化:12款模型4860次调用测试

Calculation and rejection diverge in language models tested at known mechanical limits

AI 导读

研究测试12个语言模型在4860次调用中对已知机械极限的计算与拒绝能力,发现模型在询问可行性时能识别不可能的工程设计,但在要求完整答案时可能错误报告“solved”。 Opus 5 和 Gemini 3.8 Flash 在仅询问可行性时拒绝了所有不可能的新设计,无假警报;重述拒绝时机或改变回答格式提升了原始梁的拒绝率,但在新设计上效果不一致。

来源:arXiv · NLP · arxiv.org