最新资讯
dev.to Agent 如何记忆:五期内容与各自的一条经验 www.youtube.com Neo4j 与 Blitzy:4 天映射 3500 万行大型机代码 x.com OpenAI 与 Frontier Model Forum 发布网络越狱危害评估框架 unite.ai PSI 称其 AI 系统给出 Aaronson-Ambainis 猜想的机器可验证证明 x.com Anthropic 科学博客:AI 开始改变科学建模流程 bloomberg.com Google 接手 Crusoe 曾推介的怀俄明州数据中心 x.com OpenAI 与 Ligo 推出 BioBasicsBench 评测 AI Agent 湿实验室分析能力 techxplore.com 三种新技术针对隐藏 AI 后门且不显著损失性能 unite.ai OpenAI CFO 称中期选举后数据中心建设仍将继续 techcrunch.com 数百个 Artex AI 黑客工具服务器暴露在公网 techcrunch.com Meta 推出 Spaces,为 Muse 智能体提供新协作方式 wired.com Wired:免费中国 AI 模型的黑客能力快速提升
多元动态
登录 注册
智能体 dev.to · @Dawncoral

Skill 契约与仪式感:一次窄范围复测

原文 我的收藏

作者对自身此前发布的结论做窄范围复测:在三个模型、三个实验组上共运行 180 次执行和 180 次评判。结果显示 Kimi K3.1 Pro 在没有 skill 文件时十项清晰任务失败六项,提供 skill 后仅失败一项;精简 shell 与完整脚手架得分相同(九比十)。在主指标的 28 个有效配对中,未能复现“任务变模糊后完整结构会拖累强模型”的说法。作者建议维护 SKILL.md 或 AGENTS.md 的人关注单次运行可见的部分与仅维护者可见的部分。

AI推荐理由 文章报告一次针对作者自身此前结论的窄范围复测:180 次执行、180 次评判、三个模型三个实验组,称 Kimi K3.1 Pro 无 skill 文件时十项清晰任务失败六项、提供 skill 后失败一项,且精简 shell 与完整脚手架同为九比十,未复现“完整结构在模糊任务上拖累强模型”的说法;方法描述较具体,但样本窄、结论限于该实验,需谨慎外推。

72

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

Dawncoral Skill 契约与仪式感:一次窄范围复测 6天前 · 原文发布
← 返回精选动态 原文

更多内容