最新资讯
reddit.com OpenAI 称 Astra 仅满足 10% 安全任务标准 dev.to FreeToken:在自有 GPU 上运行前沿 MoE 模型及其内存需求 dev.to 当 AI Agent 说“完成”时,究竟完成了什么? dev.to 部署 Underdog Bark 3.0 Pro:逐字转写、自定义后端与分块设置 dev.to 为艰难对话构建 AI:五个 Agent、一条安全正则与一位盲评监督者 techcrunch.com Palo Alto Networks 洽谈以 5 亿美元收购 AI Agent 安全初创公司 Clutch theinformation.com 黄仁勋被要求就涉华间谍指控向国会作简报 www.infoq.com Edera 推出 Object Capability Bounded Authority,试图将凭证与 AI Agent 工作负载隔离 wechat 这波杀疯了!旗舰级模型不限量、1个月视频额度免费领 bloomberg.com AI 抛售蔓延至信用市场,软银领跌亚洲美元债 dev.to 如何在专用 GPU 服务器上用 OpenAI 兼容 API 部署 LLM dev.to 审计 153 份 Claude Code 与 Codex 会话记录:User-Agent 与 URL 中的邮箱泄露
多元动态
登录 注册
智能体 arxiv.org · @Patrick Ruch

BITEM 在 NTCIR-19 R2C2 任务:从 Agentic RAG 流水线信号预测置信度

原文 我的收藏

BITEM 团队以单一 agentic 流水线参加 NTCIR-19 R2C2 两个子任务:模型在电影语料上检索、阅读并记录证据,orchestrator 持有记录并裁定可提交内容;claim 须经 entailment cascade 对照所引段落校验后才被接纳,答案须有足够已校验证据支撑才发布。每个问题运行三到四次,后续 pass 从已剔除前序所见内容的语料中检索。置信度由 orchestrator 依据运行残留信号计算,不向模型索取自评。两次检索运行在 22 支队伍中列第 4、第 5,合并多 pass 带来 0.0709 nDCG@20 增益,在多跳和后处理密集问题上增益最大,组织方将合并运行列为该领域第一。

AI推荐理由 NTCIR-19 R2C2 任务的系统描述论文,提出用单一 agentic RAG 流水线同时完成两个子任务:模型负责检索、阅读并记录证据,orchestrator 持有记录并裁定可提交内容,claim 需通过 entailment cascade 对照所引段落校验后才被接纳,答案需有足够已校验证据支撑才发布。每个问题运行三到四次,后续 pass 从已剔除前序所见内容的语料中检索;置信度由 orchestrator 依据运行残留信号计算,不向模型索取自评。文中给出具体结果:两次检索运行在 22 支队伍中列第 4、第 5,合并多 pass 带来 0.0709 nDCG@20 增益,在多跳和后处理密集问题上增益最大,组织方将合并运行列为该领域第一。局限是摘要未给出完整方法细节与消融,且为任务报告而非通用结论。

72

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容