最新资讯
www.infoq.com Yelp 为 AI Assistant 融合原生与服务器驱动 UI computerworld.com Box 发布 Architect:用自然语言构建业务流程工作流 the-decoder.com METR 称 Anthropic 或已在 7 月越过自身 AI 加速预警阈值 towardsdatascience.com 用 Ollama 和 Python 构建你的第一个多工具 AI Agent the-decoder.com Thinking Machines 的 Inkling 2 Small 称霸西方开放权重模型 dev.to 为 CI/CD 构建 AI 质量门禁 dev.to Kakao 发布面向 AI Agent 的决策模型 Kanana-2-v-decide computerworld.com Microsoft 对 Copilot Chat 企业用户扩大未公开的使用限制 pub.towardsai.net Google 发布 Gemini 4 Carbon:主打网络安全能力的前沿模型 gradientflow.com METR 研究:AI 正在加速构建 AI 的团队本身 www.infoq.com GitLab 19.5 将 Agentic 开发纳入 DevOps 平台的治理体系 aiacceleratorinstitute.com 研究:AI Agent 的复杂流程编排可能反而是问题所在
多元动态
登录 注册
大模型 x.com · @simonw

Simon Willison 复现长数字加法实验:本地运行 Qwen 3.8 27B 的推理与非推理模式对比

原文 我的收藏

Simon Willison 重新执行了 Colin Fraser 此前针对 GPT-4o 的长数字加法测试,这次改用本地运行的 Qwen 3.8 27B,并分别在推理模式与非推理模式下进行。推文仅给出实验设置,未披露具体准确率、样本规模或与 GPT-4o 的对比数据,因此尚无法判断该模型在长数字加法任务上的实际表现。

AI推荐理由 Simon Willison 复现 Colin Fraser 早前针对 GPT-4o 的长数字加法实验,改为在本地运行 Qwen 3.8 27B,并区分推理与非推理两种模式。这是可复现的对比测试,对本地模型算术能力评估有参考价值;但正文仅为推文摘要,未给出具体准确率、测试样本量或与 GPT-4o 的对照结果,结论尚不可验证,且模型名称与日期存在异常,需谨慎对待。

62 浏览 42,816 点赞 425 评论 91 转发 26

正文

I re-ran an experiment @colin_fraser ran against GPT-4o a while back to see how good it was at adding long numbers, only this time I tried Qwen 3.8 27B running locally in both reasoning and non-reasoning modes https://simonwillison.net/2026/Oct/4/qwen38-addition-in-words/

来源报道 · 2 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容