最新资讯
reddit.com OpenAI 称 Astra 仅满足 10% 安全任务标准 dev.to FreeToken:在自有 GPU 上运行前沿 MoE 模型及其内存需求 dev.to 当 AI Agent 说“完成”时,究竟完成了什么? dev.to 部署 Underdog Bark 3.0 Pro:逐字转写、自定义后端与分块设置 dev.to 为艰难对话构建 AI:五个 Agent、一条安全正则与一位盲评监督者 techcrunch.com Palo Alto Networks 洽谈以 5 亿美元收购 AI Agent 安全初创公司 Clutch theinformation.com 黄仁勋被要求就涉华间谍指控向国会作简报 www.infoq.com Edera 推出 Object Capability Bounded Authority,试图将凭证与 AI Agent 工作负载隔离 wechat 这波杀疯了!旗舰级模型不限量、1个月视频额度免费领 bloomberg.com AI 抛售蔓延至信用市场,软银领跌亚洲美元债 dev.to 如何在专用 GPU 服务器上用 OpenAI 兼容 API 部署 LLM dev.to 审计 153 份 Claude Code 与 Codex 会话记录:User-Agent 与 URL 中的邮箱泄露
多元动态
登录 注册
智能体 arxiv.org · @Chelsea Finn

ScholarCatalyst:面向“启发新研究”的论文检索基准

原文 我的收藏

论文提出 ScholarCatalyst 基准,通过可扩展的自动流程让 207 篇近期计算机科学论文的 184 位第一作者标注哪些候选论文推动或可能推动了其项目,并附详细理由。基于此构建带作者判断的检索任务:给定初始研究问题,仅从项目开始时的文献中检索相关论文。结果显示,agentic search 的 Recall@20 为 0.42,低于 embedding 检索的 0.48,尽管前者调用了同一检索器。

AI推荐理由 提出 ScholarCatalyst 基准,由 184 位作者对 207 篇近期 CS 论文标注哪些先前工作推动了其项目,并给出理由,构建了带作者判断的检索任务。摘要指出 agentic search 的 Recall@20 为 0.42,低于 embedding 检索的 0.48,即使 agent 调用了同一检索器。这是对 AI 科研辅助与检索评测的具体新证据,但摘要被截断,Claude Fable 5.1 部分结论不完整,需谨慎对待。

78

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容