跳到正文
热点事件历史事件

Qwen3.8 27B 英文表达加法结果准确率骤降

1 篇报道1 个报道来源14 天前更新

先了解这件事

AI 综述

2026 年 10 月 5 日,Simon Willison 在 DGX Spark 上对本地运行的 Qwen3.8-27B-Q4_K_M.gguf 进行了英文单词输出正整数加法结果的能力测试。测试覆盖 5,070 个用例,并禁用了推理功能。结果显示整体数值准确率仅 23.57%,且随操作数位数增加而急剧下降:1–3 位操作数时准确率为 97.04%,而到 10–13 位操作数时骤降至 6.44%。在开启中等推理后,针对 169 个对比用例,模型正确回答了 167 个,表明推理模式可显著弥补该能力短板。

AI 根据报道生成 · 13 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月5日
  1. Simon Willison
    Qwen3.8 27B 用英文单词表达加法结果的能力测试

    Simon Willison 在 DGX Spark 上测试本地 Qwen3.8-27B-Q4_K_M.gguf 用英文单词输出正整数加法结果的能力。在 5,070 个禁用推理的用例中,数值准确率仅 23.57%,从 1-3 位操作数的 97.04% 骤降至 10-13 位操作数的 6.44%。开启中等推理后,在 169 个对比用例中获得 167 个正确答案。