大模型
website ·
Fable 5.1 在 ParseBench 文档 OCR 评测中全面优于上代
Fable 5.1 在 ParseBench 上表现优于 Fable 5，该基准包含 2000+ 金融、法律、保险等真实文档。它在表格、内容保真度、格式、图表和视觉基础方面均领先，是少数在文档 OCR 上取得进步的模型。但作为独立 OCR 工具成本较高，每页 15 美分，比 LlamaParse 的代理模式贵 10-15 倍。
AI推荐理由 该评测结果对 AI 从业者选择文档解析模型有参考价值，表明 Fable 5.1 在视觉理解上有所突破，但成本效益需权衡，可指导在特定任务中的模型选型。
86
浏览 9,550
点赞 76
评论 24
转发 10
正文
Fable 5.1没有附带文档OCR基准测试，因此我们在ParseBench上对其进行了基准测试：这是一个全面的解析基准测试，包含来自金融、法律、保险等领域的2000多份真实世界文档。
作为积极的一点，它是近期记忆中首批在模型代际之间文档OCR性能实际有所提升的前沿模型之一！
✅ 它在我们的所有指标上全面击败Fable 5，从表格/内容保真度/格式/图表/视觉基础方面均如此
✅ 它是目前解析表格的最佳模型之一
这很棒，因为虽然前沿模型在推理基准上迅速进步，但它们在视觉理解上并未进步。在此之前，最新模型（Opus 5、5.6-Sol、3.7 Flash）在视觉理解任务上停滞不前。
显然，您不应单独将Fable 5.1用作文档OCR工具；除了缺少所需的元数据外，它每页还花费15美分——这比我们在LlamaParse上的默认代理模式（性能相似）贵10-15倍。
如果您有兴趣跟踪我们在文档OCR上基准测试的90多个解决方案，请查看ParseBench：[parsebench.ai](https://www.parsebench.ai/)
如果您正在寻找专用的SOTA OCR工具来驱动您的文档处理工作负载，请查看LlamaParse：[cloud.llamaindex.ai](https://cloud.llamaindex.ai/)
查看原文（中文正文为 AI 翻译）
Fable 5.1 didn't come with document OCR benchmarks, so we benchmarked it on ParseBench: a comprehensive parsing benchmark that's comprised of 2k+ real-world documents across finance, legal, insurance, and more.
As a positive note, it is one of the first frontier models in recent memory where document OCR performance actually improved between model generations!
✅ It beats Fable 5 across the board on all of our metrics, from tables/content faithfulness/formatting/charts/visual grounding
✅ It is one of the best models out there for parsing tables
This is great, because while frontier models have rapidly advanced on reasoning benchmarks, they have not advanced on visual understanding. Prior to this the latest models (Opus 5, 5.6-Sol, 3.7 Flash) have stagnated on visual understanding tasks.
Obviously you shouldn't use Fable 5.1 as a document OCR tool on its own; besides missing needed metadata, it also costs 15c a page - which is 10-15x more expensive than our default agentic mode on LlamaParse (which performs similarly).
If you're interested in tracking the 90+ solutions that we've benchmarked on doc OCR, check out ParseBench: [parsebench.ai](https://www.parsebench.ai/)
If you're looking for a dedicated, SOTA OCR tool to power your doc processing workloads, check out LlamaParse: [cloud.llamaindex.ai](https://cloud.llamaindex.ai/)
