最新资讯
dev.to 我们在 DolphinBench 上测试记忆检索:纯关键词搜索暴露了自身回归 dev.to 别再把 Agent 写成 while 循环,把它建模为状态机 bloomberg.com Rightmove 与 Scout24 借 AI 产品应对低迷房市并上调展望 stackoverflow.blog 欢迎来到芯片时代:半导体制造、AI 数据中心与芯片设计的未来 www.youtube.com AI Agent 总犯同样的错:CentralAgent AI 将记忆重构为经验系统 pub.towardsai.net Netflix 科学家建议重采样 LLM 评判:5 次仅将误差棒缩小 13% pub.towardsai.net Jev 作为 LLM 前的静默层:构建提示感知的模型路由器 reddit.com OpenAI 称 Astra 仅满足 10% 安全任务标准 dev.to FreeToken:在自有 GPU 上运行前沿 MoE 模型及其内存需求 dev.to 当 AI Agent 说“完成”时,究竟完成了什么? dev.to 部署 Underdog Bark 3.0 Pro:逐字转写、自定义后端与分块设置 dev.to 为艰难对话构建 AI:五个 Agent、一条安全正则与一位盲评监督者
多元动态
登录 注册
智能体 dev.to · @DK

一次恶意写入,永久被利用:攻击者如何瞄准 AI 记忆与学习

原文 我的收藏

文章指出,业界宣称已解决的记忆存储问题正是攻击落点,持续学习本身也是攻击面:无状态模型在会话结束后会遗忘攻击,而具备记忆或学习能力的模型不会。OWASP 已将记忆与上下文投毒列为 Agentic 应用 Top 10 中的 ASI06,并与普通提示注入区分开,因为它具有持久性。文中列举了针对记忆层的攻击,包括 2024 年 ChatGPT memory 被文档和网页中的隐藏指令写入用户偏好、跨会话持久化并外泄对话数据的案例。

AI推荐理由 文章聚焦 AI 记忆与持续学习带来的持久化攻击面,引用 OWASP ASI06(Memory and Context Poisoning)分类,并给出 ChatGPT memory 2024 被隐藏指令写入用户偏好、跨会话外泄对话数据的具体案例。对 Agent 安全设计有直接参考价值;但正文为摘要片段,部分攻击细节未完整展开,且属个人博客转述而非一手研究。

78

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容