Qwen3.8 27B 英文单词加法基准测试
先了解这件事
AI 综述
2026年10月5日，Simon Willison 发布一项基准测试，用 5,070 个禁用推理的案例，检验本地 Qwen3.8-27B-Q4_K_M.gguf 模型能否用英文单词完成正整数加法并输出精确结果。报道称其数值准确率为 23.57%，格式合规率 96.17%；准确率随位数增加从一至三位数的 97.04% 降至十至十三位数的 6.44%；开启中等推理后，169 次配对测试中答对 167 次。
AI 根据报道生成 · 11 天前更新
最新进展10月5日 07:34
基准测试显示该模型禁用推理时数值准确率仅 23.57%，开启中等推理后 169 次配对测试答对 167 次。报道时间线
沿着报道，了解事件的不同侧面。
10月5日
- Simon WillisonQwen3.8 27B 用英文单词做加法的基准测试
一项基准测试用 5,070 个禁用推理的案例，检验本地 Qwen3.8-27B-Q4_K_M.gguf 模型能否用英文单词完成正整数加法并输出精确结果，其数值准确率为 23.57%，格式合规率 96.17%。准确率随位数增加从一至三位数的 97.04% 降至十至十三位数的 6.44%；开启中等推理后，169 次配对测试中答对 167 次。