最新资讯
dev.to 我们在 DolphinBench 上测试记忆检索:纯关键词搜索暴露了自身回归 dev.to 别再把 Agent 写成 while 循环,把它建模为状态机 bloomberg.com Rightmove 与 Scout24 借 AI 产品应对低迷房市并上调展望 stackoverflow.blog 欢迎来到芯片时代:半导体制造、AI 数据中心与芯片设计的未来 www.youtube.com AI Agent 总犯同样的错:CentralAgent AI 将记忆重构为经验系统 pub.towardsai.net Netflix 科学家建议重采样 LLM 评判:5 次仅将误差棒缩小 13% pub.towardsai.net Jev 作为 LLM 前的静默层:构建提示感知的模型路由器 reddit.com OpenAI 称 Astra 仅满足 10% 安全任务标准 dev.to FreeToken:在自有 GPU 上运行前沿 MoE 模型及其内存需求 dev.to 当 AI Agent 说“完成”时,究竟完成了什么? dev.to 部署 Underdog Bark 3.0 Pro:逐字转写、自定义后端与分块设置 dev.to 为艰难对话构建 AI:五个 Agent、一条安全正则与一位盲评监督者
多元动态
登录 注册
大模型 arxiv.org · @Matthew Dressman

衡量风险而非伤害:检测 LLM 对话中的心理伤害风险因素

原文 我的收藏

论文提出在 AI 回复层面检测可观察的心理伤害风险行为,并聚合信号用于纵向监测。作者操作化八类行为,构建含 47,062 条 AI 回复、373,873 个回复-因素标签的合成多标签语料,辅以定向人工标注验证;比较基于嵌入的分类器、LLM 直接评判及分类器-评判级联三种方案。所有检测器与模型无关,仅依赖 LLM 输出,无需访问内部状态,并应用于既有研究中的分布外人类-AI 对话数据。

AI推荐理由 提出以“风险因素”而非直接“伤害”来监测 LLM 对话中的心理风险,并构建 47,062 条 AI 回复、373,873 个标签的合成多标签语料及人工标注验证;比较嵌入分类器、LLM 直接评判与级联方案,且检测器仅依赖模型输出、无需内部状态。新意在于可操作化八类风险行为并支持纵向监测,局限是合成语料与摘要未给出完整评测数值,实际部署效果仍需验证。

78

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容