最新资讯
techcrunch.com Airbnb 称将于 2027 年上半年推出 AI 旅行代理 theverge.com Perplexity 推出面向工作的 AI 代理 Teammates unite.ai Five9 拟以约3.25亿美元收购 Level AI,扩展客服AI分销渠道 unite.ai Serve Robotics 向物理AI公司开放车队软件与数据 wired.com 聊天机器人广告时代到来:哪些做法有效、哪些无效 techmeme.com METR:Anthropic 删减了评估报告中最具信息量的证据 unite.ai 微软借助 AI 修复更多 Windows 漏洞,但补丁部署仍滞后 bloomberg.com Cloudflare 上调年度利润预期,AI 推动网络需求 theinformation.com Anthropic 为 Claude 推出个人理财功能 theinformation.com Airbnb 披露 Chesky 隐秘 AI 初创公司的新细节 engadget.com Google 将停用 Firebase Studio,引导开发者转向 Antigravity 与 AI Studio www.youtube.com 别再给 AI Agent 发 API Key:Keycard 与 Temporal 谈 Agent 安全与可恢复执行
多元动态
登录 注册
智能体 arxiv.org · @Shubhashis Roy Dipta

P2NPCBench:对抗多智能体改写下的P与NP完全配对评测

原文 我的收藏

论文指出现有基准无法区分模型是推理还是记忆,提出P2NPCBench:12个问题族中每个NP完全问题都配有表面相同的多项式时间孪生问题。作者用AgentGAN对抗多智能体框架改写题干直至冻结代码模型失败,并以可执行有效性门控保证改写保持答案与复杂度类别,得到2114条加固题目及人工核验参考解,评测12个闭源与开源模型,发现各模型在NP完全题上得分均低于其P孪生题。

AI推荐理由 构建P2NPCBench,将12类NP完全问题与其多项式时间孪生问题配对,并用AgentGAN多智能体对抗改写去除教材线索、以可执行校验保证答案与复杂度类别不变,含2114条加固题目与人工参考解,评测12个模型;对区分推理与记忆有实际价值。

75

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容