最新资讯
dev.to 让模型改写文档前,先量化事实保真度 dev.to 回放 153 个 Claude Code 与 Codex 会话,审计 Agent 的生产影响范围 dev.to 银行 77 意图分类最便宜 LLM:GPT-6.1 Terra 每次成功任务 $0.000727 theinformation.com Chesky的副业:Airbnb向CEO新设AI实验室出售IP theverge.com OpenAI 宣布数据中心项目不再与公职人员签署保密协议 dev.to NVIDIA 发布四个开放 Cosmos 3 仿真模型 dev.to 真实 MCP 客户端击穿我们服务器的五种方式 theverge.com Airbnb 正在开发 AI 旅行 agent,计划 2027 年上半年推出 wechat 这可能是美国AI最魔幻的一天。 nytimes.com 美众议院共和党领袖要求 Nvidia 黄仁勋闭门简报 pub.towardsai.net 忘掉我:为记忆而设计的系统中的删除难题 marktechpost.com Google 发布 Gemini Omni 1.2 Flash:15 秒视频,每秒 0.07 美元
多元动态
登录 注册
智能体 arxiv.org · @Nils Lukas

AdvSim2Real:在 Web 世界模型中训练抵御自适应提示注入的 Web Agent

原文 我的收藏

论文关注 Web Agent 读取第三方页面时可能被植入指令劫持目标的问题,指出现有防御在训练前固定注入样本,难以抵御自适应攻击者。作者提出 AdvSim2Real,在冻结的 Web 世界模型内协同演化任务课程、注入攻击者与 Agent:课程奖励 Agent 约一半成功率的任务,攻击者仅在把判定成功翻转为失败时获奖励。摘要称模拟器训练使 4B Agent 在有无攻击下完成率均提升并保持鲁棒(摘要截断)。

AI推荐理由 针对 Web Agent 面临的页面注入攻击,提出 AdvSim2Real:在冻结的 Web 世界模型中协同演化任务课程、注入攻击者和 Agent,课程奖励约半数成功率任务,攻击者仅在成功翻转为失败时获奖励。摘要称在模拟器中训练使 4B Agent 在有无攻击下完成率均提升并保持鲁棒(摘要截断)。新信息是把自适应攻击者与任务课程共同演化,弥补固定注入微调和固定任务对抗训练的不足;局限是结果来自模拟器,真实网页迁移效果未在摘要中给出。

80

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容