大模型
x.com ·
@simonw
Simon Willison 复现长数字加法实验:本地运行 Qwen 3.8 27B 的推理与非推理模式对比
Simon Willison 重新执行了 Colin Fraser 此前针对 GPT-4o 的长数字加法测试,这次改用本地运行的 Qwen 3.8 27B,并分别在推理模式与非推理模式下进行。推文仅给出实验设置,未披露具体准确率、样本规模或与 GPT-4o 的对比数据,因此尚无法判断该模型在长数字加法任务上的实际表现。
AI推荐理由 Simon Willison 复现 Colin Fraser 早前针对 GPT-4o 的长数字加法实验,改为在本地运行 Qwen 3.8 27B,并区分推理与非推理两种模式。这是可复现的对比测试,对本地模型算术能力评估有参考价值;但正文仅为推文摘要,未给出具体准确率、测试样本量或与 GPT-4o 的对照结果,结论尚不可验证,且模型名称与日期存在异常,需谨慎对待。
62
浏览 42,816
点赞 425
评论 91
转发 26
正文
I re-ran an experiment @colin_fraser ran against GPT-4o a while back to see how good it was at adding long numbers, only this time I tried Qwen 3.8 27B running locally in both reasoning and non-reasoning modes https://simonwillison.net/2026/Oct/4/qwen38-addition-in-words/