最新资讯
dev.to 如何在专用 GPU 服务器上用 OpenAI 兼容 API 部署 LLM dev.to 审计 153 份 Claude Code 与 Codex 会话记录:User-Agent 与 URL 中的邮箱泄露 dev.to 你的 Agent Harness 应具备的 17 项能力 dev.to 离线 AI 记忆中 0.8 余弦阈值为何失效 dev.to Kimi K3.1 Pro 开放权重:自托管 2.8T 模型前的开发者清单 dev.to 如何通过工具调用引导模型以提升 Harness 质量 dev.to AI Agent 审计轨迹不等于对话记录 dev.to 精简 MCP server 工具数量:更少工具、更小影响面,双重收益 dev.to 为什么 git checkout 无法撤销 AI 编码 agent 的改动? wechat AI短剧门槛降降降!实测即梦短剧工作室:剧本分镜预演一条龙,伙伴计划长期护航 dev.to 让模型改写文档前,先量化事实保真度 dev.to 回放 153 个 Claude Code 与 Codex 会话,审计 Agent 的生产影响范围
多元动态
登录 注册
大模型 arxiv.org · @Xiang Yu

Hy-Memory-30B-A3B:面向长期记忆写入的归因强化学习

原文 我的收藏

外部记忆系统将语言模型应用扩展到上下文窗口之外,但其质量关键取决于执行写入路径的模型:决定保留什么、如何精确表示、新证据如何更新持久状态。现有框架通常把通用大模型置于框架特定提示之后,既抬高服务成本,专用写入器也难以直接迁移到另一协议,跨主流记忆框架的统一模型尚属空白。论文提出Hy-Memory-30B-A3B,一个跨Mem0、MemOS与Hy-Memory训练的紧凑长期记忆写入模型:Memory On-Policy Distillation在student生成状态上教授各框架写入协议,Memory RL则通过稠密分块探针、归因式跨块奖励、过度存储控制与chunk级GRPO优化下游可答性,并跨窗口携带策略写入的记忆库。

AI推荐理由 针对外部记忆系统写入路径依赖通用LLM、服务成本高且专用写入器难以跨框架迁移的问题,提出紧凑的长期记忆写入模型Hy-Memory-30B-A3B,跨Mem0、MemOS与Hy-Memory训练。方法包括Memory On-Policy Distillation在student生成状态上学习各框架写入协议,以及Memory RL用稠密分块探针、归因式跨块奖励、过度存储控制与chunk级GRPO优化下游可答性。对记忆系统落地有实用价值,但摘要未给出与通用LLM写入器的完整对比数据。

70

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容