Simon Willison·· 2026-10-05AI 评分20
Qwen3.8-27B 禁用推理时数字加法准确率仅23.57%
Qwen3.8 27B addition in words
AI 导读
Qwen3.8-27B 在禁用推理模式下对 5070 个用例的数字加法准确率为 23.57%。 实验在 DGX Spark 本地硬件上进行,1 至 3 位数加数准确率达 97.04%,而 10 至 13 位数准确率骤降至 6.44%。 启用中等推理模式后,169 个对比用例中 167 次回答正确,显示推理功能显著提升了大数计算性能。
来源:Simon Willison · simonwillison.net