最新资讯
dev.to 银行 77 意图分类最便宜 LLM:GPT-6.1 Terra 每次成功任务 $0.000727 theinformation.com Chesky的副业:Airbnb向CEO新设AI实验室出售IP theverge.com OpenAI 宣布数据中心项目不再与公职人员签署保密协议 dev.to NVIDIA 发布四个开放 Cosmos 3 仿真模型 dev.to 真实 MCP 客户端击穿我们服务器的五种方式 theverge.com Airbnb 正在开发 AI 旅行 agent,计划 2027 年上半年推出 wechat 这可能是美国AI最魔幻的一天。 nytimes.com 美众议院共和党领袖要求 Nvidia 黄仁勋闭门简报 pub.towardsai.net 忘掉我:为记忆而设计的系统中的删除难题 marktechpost.com Google 发布 Gemini Omni 1.2 Flash:15 秒视频,每秒 0.07 美元 unite.ai Airbnb 计划推出覆盖规划、预订与客服的 AI 旅行 agent techcrunch.com Airbnb 称将于 2027 年上半年推出 AI 旅行代理
多元动态
登录 注册
大模型 arxiv.org · @M. Mikail Demir

Commit or Abstain?System One 决策模型、LLM 与缺失法律依据

原文 我的收藏

研究测试决策模型在正确法律依据缺失时能否弃权:将 CaseHOLD 扩展出弃权条件,在 5314 项中替换 1670 项正确答案,对比 4 个决策模型与 6 个生成式 LLM。无正确选项时生成式 LLM 仍有 38%-86% 强行作答,最谨慎决策模型为 30%;标准 CaseHOLD 上决策模型以约 1/55 成本达到 88.1% 准确率,接近最佳生成模型的 88.2%。

AI推荐理由 在 CaseHOLD 上扩展弃权条件(5314 项中替换 1670 项正确答案),比较 4 个决策模型与 6 个生成式 LLM:无正确选项时生成式模型仍有 38%-86% 强行选择,最谨慎决策模型为 30%;标准任务上决策模型以约 1/55 成本达到与最佳生成模型相当准确率(88.1% vs 88.2%)。有具体量化证据,对法律 AI 可靠性有实际参考价值。

74

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容