最新资讯
bloomberg.com Nvidia 加强东南亚芯片追踪以打击走私 thestack.technology 模型路由需求升温,Agent Router 推出开源替代方案 www.youtube.com Google DeepMind 的 Philipp Schmid:AI 同事需要具备的七个要素 unite.ai Cashfree 为 AI Agent 的托管结账加入 WebMCP 工具 dev.to 我们在 DolphinBench 上测试记忆检索:纯关键词搜索暴露了自身回归 dev.to 别再把 Agent 写成 while 循环,把它建模为状态机 analyticsindiamag.com 小语言模型可能重塑企业 AI 部署方式 bloomberg.com Rightmove 与 Scout24 借 AI 产品应对低迷房市并上调展望 stackoverflow.blog 欢迎来到芯片时代:半导体制造、AI 数据中心与芯片设计的未来 www.youtube.com AI Agent 总犯同样的错:CentralAgent AI 将记忆重构为经验系统 pub.towardsai.net Netflix 科学家建议重采样 LLM 评判:5 次仅将误差棒缩小 13% pub.towardsai.net Jev 作为 LLM 前的静默层:构建提示感知的模型路由器
多元动态
登录 注册
论文研究 arxiv.org · @James Zou

PlotGround:基于真实科学图表与源数据的图表数字化基准

原文 我的收藏

论文指出,科学图表常编码难以机器读取的定量结果,准确数字化对验证和复用已发表发现很重要,但现有基准多依赖合成图表或覆盖图表类型有限,当前模型从真实科学图表恢复数值的准确度尚不明确。作者提出 PlotGround 自动化流水线,将图表映射到源数据表、识别可重建面板并生成带源数据参考值的定量问题,据此构建经人工验证的 PlotGround-1k 基准,包含来自 1,066 篇 bioRxiv 预印本的 1,119 个问题。在十六个多模态模型上,最佳模型在 ±5% 相对误差容差下达到 87.5% 准确率,容差收紧至 ±2% 后所有模型表现下降。

AI推荐理由 构建 PlotGround 自动化流水线,将真实科学图表与其作者发布的源数据映射,生成有源数据依据的定量问题,并据此建立经人工验证的 PlotGround-1k 基准(1,066 篇 bioRxiv 预印本、1,119 个问题)。对多模态模型图表数值读取能力给出可复现评测:最佳模型在 ±5% 相对误差容差下达 87.5%,收紧到 ±2% 后所有模型下降。基准与数据来源明确,但属评测类工作,产业直接价值有限。

70

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容