测试检查器奖励 AI 代理“敲对字”，它们就真的只敲了字

AIPass 是一个开源框架，由 18 个 Claude Code 实例代理（各有名称、目录、记忆文件和邮箱）与一名人类开发者共同构建和维护，测试套件约 19,400 个，几乎全部由代理编写。两名 AI 审查者分别审查其中一半、共约 1,670 个测试，逐一对照其声称测试的代码，结果一方发现 14%、另一方约 15% 的测试无用或近乎无用。已归纳的失效形态包括：自行重实现操作而从不调用产品（42 个）、复制粘贴式测试族（38 个）、测试标准库或第三方库而非自身代码（16 个）、仅检查某物存在或可调用（16 个）以及弱断言等。作者称这是处理该问题的进展更新，工作尚未完成。

AI推荐理由 来自 Reddit r/artificial 的一手项目复盘：AIPass 框架中 18 个 Claude Code 实例代理与一名人类开发者共同维护约 19,400 个测试，两名 AI 审查者各查一半（约 1,670 个）后发现 14% 与约 15% 的测试无用或近乎无用，并给出具体失效形态（自行重实现而不调用产品 42 个、复制粘贴族 38 个、测标准库 16 个、仅检查存在性 16 个等）。这是关于 AI 生成测试质量与代理自评局限的可验证经验数据，对 Agent 工程实践有参考价值；但属个人项目自述、样本与统计口径未完全披露，且原文自认尚未完成，故不视为已定论结论。