最新资讯
dev.to 在信任 AI 生成的测试用例前,如何逐条复核 unite.ai Franklin Templeton 构建 AI 研究工作流以揭示风险 techxplore.com AI 助力寻找更优的钛合金 3D 打印工艺参数 engadget.com Perplexity 推出“teammates”日常工作任务 AI agent computerworld.com 别提数据中心:OpenAI 改称“compute campuses” theguardian.com 俄美试图阻止就自主武器制定具有约束力的规则 bloomberg.com Nvidia 加强东南亚芯片追踪以打击走私 thestack.technology 模型路由需求升温,Agent Router 推出开源替代方案 www.youtube.com Google DeepMind 的 Philipp Schmid:AI 同事需要具备的七个要素 unite.ai Cashfree 为 AI Agent 的托管结账加入 WebMCP 工具 dev.to 我们在 DolphinBench 上测试记忆检索:纯关键词搜索暴露了自身回归 dev.to 别再把 Agent 写成 while 循环,把它建模为状态机
多元动态
登录 注册
大模型 mp.weixin.qq.com · @新智元

大模型都是演技派:用真实数据训练 60 个数字学生来教 AI 教学

原文 我的收藏

文章介绍 StudentSim 研究:AI 教师改进需要学生端反馈,但真实 human study 采集成本高、周期长。研究团队尝试用真实学生记录训练可评估、可复用的 AI 学生模拟器,让 AI 教师在训练阶段反复获得代理反馈。文章指出,直接让大模型按人设扮演学生存在认知水平偏差——模型可能用小学生口吻回答却给出远超该水平的推理,因此模拟器需同时复现学生独立作答状态,并在收到教师指导后产生符合其能力边界的变化。文中还梳理了知识追踪近 30 年的脉络及最近发展区、动态评估等教育学概念,但未提供论文标题、作者与实验数据。

AI推荐理由 介绍 StudentSim 研究:用真实学生数据训练可复用的 AI 学生模拟器,为 AI 教师提供训练阶段的代理反馈,并指出仅靠人设提示词扮演学生存在认知水平与角色语气不同步的偏差。属于 user simulator / 教育 Agent 方向的具体研究思路,有明确问题定义和学术脉络(知识追踪、最近发展区、动态评估)。但正文为公众号转述,未给出论文标题、作者、实验数据与量化结果,摘要中论文/代码链接为空,无法验证效果,故质量分中等。

62

正文

新智元 2026-09-10 12:57 北京 ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=6e4eb2e7&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_jpg%2FRvq8Ow69CYVg25XQER1s9SiaayeS0ib2jlyIx3YSYQwticxDga0MVgFPlDuDiaO2IOCokEC2YYWxlpiaEOlpAwrOVCCTgtWWFBqmpFgEyys8wUqA%2F0%3Fwx_fmt%3Djpeg) ### ### **新智元报道** ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=9821b506&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fsz_mmbiz_png%2FRvq8Ow69CYWGxcbmnyYvqrSqhntcbPdelKBG0JLug4pEX8icjBSe5eib6PekswOSvrq8ybatQJRDr9Vib5WOKaUuibKfLb5qH3J4kEIYmC4NQJU%2F640%3Fwx_fmt%3Dpng%26from%3Dappmsg) AI教师已经可以完成不少单次教学任务。 一道数学题,它能拆解步骤;一篇英文作文,它能指出语法问题;一盘棋,它也能讲出下一步思路。很多场景里,模型输出已经足够像一位耐心助教。 但教学效果不能只看教师端。学生听完之后有没有改正错误,是否只是照着提示走,同一句讲解对不同学生是否产生不同效果,这些都发生在学生端。 **AI****教师如果要学习个性化指导,也需要反复观察学生反应。** **现实里,这些反应主要来自human study。每次调整教学策略,都要组织学生参与,收集交互,再由人工评估。** **AI****模型可以快速更新,但教育反馈的获取速度受human study实验周期限制。** ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=9d02357f&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fsz_mmbiz_png%2FRvq8Ow69CYWS29CpVPDaC9j1DprmwtH0Fl0ia9wbCHJibb4VYIiacKrC0VjsLys26DeVb0jRcG3XLt5vMRv5VXwtzhIZHsrCZy4EibcXgcDyYrE%2F640%3Fwx_fmt%3Dpng%26from%3Dappmsg) AI tutor需要学生反馈来改进教学,但真实反馈采集成本较高。StudentSim希望把真实学生记录转化为训练阶段可反复调用的代理反馈。 近期研究StudentSim,从这个矛盾出发。 **研究团队希望提升****AI****教师,使其理解学生优劣势,并根据不同学生给出合适指导。推进过程中,团队把问题落到学生模拟器上:能否用真实学生数据训练出可评估、可复用的AI学生,让AI教师在训练阶段获得更多反馈。** ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=7f088965&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fsz_mmbiz_png%2FRvq8Ow69CYUDHTeXtg6uKOg0iadARazoXwSslbnsHOcrYIb3tkW3Suia7tcrOOUUOiciaat4FI3iaxJhGM5e1QZOOYvWYdKibLhwMmy3Tb85Gj5O8%2F640%3Fwx_fmt%3Dpng%26from%3Dappmsg) 论文链接:  代码链接: Huggingface Paper主页: 这件事放在今天的AI agent研究里并不孤立。User simulator正在成为热门的研究方向,进入客服、电商、医疗问诊、网页操作等场景。研究者会构造模拟用户,让agent在上线前经历更多交互,测试策略、话术和鲁棒性。 教育场景里的用户模拟更复杂。学生有相对稳定的知识边界、错误习惯和学习轨迹。同一道题,有人会算错符号,有人会误解概念,有人听完提示后可以自己推到答案,有人需要更直接的指导。 近来被讨论的**人类学生数字孪生**,也正是围绕这类需求展开。 ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=6568e90c&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fsz_mmbiz_png%2FUicQ7HgWiaUb3uEdSPKrwGNmZEOaaGyzVvZ8dTtE9jU1rFsda3llYbCZpmWfiazUYjWBLTGvlPpXucH8Q0lEUJN3Q%2F640%3Fwx_fmt%3Dpng%26from%3Dappmsg) **建模学生并不是新题目** 从1995年的贝叶斯知识追踪,到深度知识追踪、再到注意力知识追踪,这条方向已经被前人探索了近30年,在拟合学生行为上相当成熟。 它们的共同缺口在于,模型只接受题目、状态、能力值这类结构化输入,没有一个接收自然语言指导的入口。无论教师说了什么,这类模型无法交互作出像学生一样的表现改变。 如果直接让大模型扮演学生,看起来很方便。给它写一句「你是一个数学基础薄弱的小学生」,模型可以立刻换成低龄学生口吻,也能表现出犹豫和不确定。 可是,角色语气和认知水平并不同步。 **一个模型可以用小学生口吻回答「我不太懂」,下一句却给出微积分级别的推理。它看起来在扮演学生,实际反馈仍然受模型自身知识储备影响,可能远远高于它被限制拥有的知识水平。** 用于AI教师训练时,这种认知水平偏差会带来问题。Tutor得到的不是某个学生在当前能力边界下的反应,而是一个高能力模型经过人设包装后的反应。 也正是因为这样,仅靠一段能力描述做条件,对大模型来说,是一条很脆弱的条件通道。这条路线近两年被大量套用到教育场景,对话辅导语料、多智能体课堂、学习者数据生成都在用;与此同时,一批专门检验其效度的研究也在出现,从架构、保真度基准、教师使用体验三个角度提出质疑。 教育学中,评价一次指导是否有效,通常不能只看学生独立作答时的表现,也要看学生在接受帮助后能走多远。 Vygotsky提出的**最近发展区(zone of proximal development)**讨论的就是这件事:**学生当前能独立完成什么,和在教师支持下能够完成什么,中间的差距反映了教学可以介入的空间。** 这一想法后来被动态评估(dynamic assessment)落为可操作的测量程序:不只记录学生答对与否,还要在给出提示后观察他的表现如何移动。 放到学生模拟器上,这个思想对应两类能力。 第一,模拟器要能复现学生独立作答时的状态,包括能力边界、错误习惯和常见选择。第二,模拟器要能在读到教师指导后产生相应变化,表现出这个学生在帮助下可能出现的更新。 ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=6568e90c&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fsz_mmbiz_png%2FUicQ7HgWiaUb3uEdSPKrwGNmZEOaaGyzVvZ8dTtE9jU1rFsda3llYbCZpmWfiazUYjWBLTGvlPpXucH8Q0lEUJN3Q%2F640%3Fwx_fmt%3Dpng%26from%3Dappmsg) **StudentSim** StudentSim把这两类能力分别定义为behavioral fidelity和guidance responsiveness,并据此训练和评估个性化学生模拟器。 ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=b8d8f3e6&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fsz_mmbiz_png%2FRvq8Ow69CYWR51sib1RShM6MJSrwNiaV54hO5g7rJicpia8fmKcOo9ib9xj9vPkWicv8vkicEYG7xcJSiaAF0XjOLpYt9lG9qlZpvH1kibaFFLoCxT48%2F640%3Fwx_fmt%3Dpng%26from%3Dappmsg) 学生模拟器需要同时回答两个问题:独立作答时是否像目标学生,接受教师指导后是否产生相应变化。 **训练流程分为两步。** 第一步汇总一个领域内多名学生记录,训练通用学生行为模型。这个阶段学习共性错误、回答格式、指导后的修正路径。 第二步使用单个学生自己的记录继续训练,得到个性化模拟器。单名学生记录少,直接训练容易过拟合;先学习群体规律,再适配个人数据,可以更稳定地获得每位学生对应的模拟器。 ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=e7bd719a&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2FRvq8Ow69CYXSaIY1p5Qt0xxBia2h7lxCTxvjI6VBZI4hvk3gvuicXw118JhLeRJl3sk1AIl5ljuDKIkUdiaupglibibBlg9DicuZMiajTGxb0keA2s%2F640%3Fwx_fmt%3Dpng%26from%3Dappmsg) 训练流程 研究团队同时构建StudentSimEval。评估覆盖60位真实学生,来自国际象棋、第二语言英语写作和基础数学三个场景。 国际象棋中,模拟器要预测某位玩家在棋局中的走法,并在教练指导后改走位。二语写作中,模拟器要生成符合学习者错误模式的作文,并根据教师批改改写片段。数学中,模拟器要预测学生答案,并在讲解后修正。 这些任务表面差异很大,评估目标保持一致:**先看模拟器是否像学生本人,再看它能否响应指导。**所有方法拿到同一份学生记录,在相同held-out测试记录上比较。 国际象棋结果中,StudentSim的F为0.5150,R为0.9067;GPT-5.4分别为0.2316和0.7186;Maia2分别为0.4535和0.2721。二语写作和数学实验中,StudentSim也在两个指标上超过对应基线。 ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=cc67a8bf&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2FRvq8Ow69CYWTicTjmg2oFPpOWibFZFmoFIVtvsOPZT2QCDzoRkBrVXg0uiaQiavr1iax4tF5fWzicrQVxAAZbGiaFJ50QicVboVMSPI4pUu81jU59N8%2F640%3Fwx_fmt%3Dpng%26from%3Dappmsg) 国际象棋评测中的二维结果。GPT-5.4响应指导较好,但行为保真较低;Maia2更贴近棋手走法,但缺少自然语言指导入口;StudentSim位于两项指标同时较高的位置。 这组结果呈现出清晰分工。GPT-5.4能阅读指导,模拟具体学生时保真不足。Maia2更贴近人类棋手走法,无法吸收自然语言教练提示。StudentSim通过真实学习记录训练,并对每位学生进行适配,在个体行为和指导响应两方面同时获得提升。 不过学生模拟器本身不是目的,终点是,它的功用需要能落地到现实世界,能被用来改进教师模型。 以往训练AI tutor,奖励信号在一些工作中来自专家标注的优质辅导对话,另外一些来自使用评分量表的通用大模型裁判。也有工作尝试把奖励接到模拟学生上,但采用的都是认知水平并不保真的角色扮演的LLM学生,而不是在真实学习者数据上训练过的模拟器。StudentSim在这一点上提出了不同的做法。 **论文进一步把StudentSim放入****AI****tutor****强化学习****流程。** 实验场景为国际象棋。系统先取出真实学生犯过的错误走法,AI tutor生成指导,StudentSim读完指导后给出修正走法。 Stockfish用于计算修正走法相对原错误走法的质量变化,这个分数回传给tutor作为RL信号。对照组包括无RL的tutor,以及使用GPT-5.4作为学生模拟器reward的tutor。 ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=fbc6fb58&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2FRvq8Ow69CYWCOuhfJXq8Cq12kaJqoDICnRSnQXzWHGUIWY0tRFOnmRwtuxZg0F2FMicsrPEZJKPHWx8t40uC4IOSVJ2LJDIecHAsBiacDjFTI%2F640%3Fwx_fmt%3Dpng%26from%3Dappmsg) Tutor生成指导,冻结的AI学生模拟器给出修正答案,系统根据修正前后的质量变化更新tutor。 三组tutor使用相同基础模型、SFT起点和GRPO设置,reward来源不同。 **国际象棋评估者进行盲评后,StudentSim reward训练出的tutor在准确性、指导质量和个性化评分上均排在第一。** 专家在打乱呈现顺序的条件下盲评三个维度:准确性看「没有误导性事实错误」的回答占比,指导质量和个性化各为1到5分。StudentSim reward训练出的tutor在三个维度上均排第一。 更值得注意的是结果反向的一组实验:用GPT-5.4当学生模拟器训出来的tutor,准确性不仅输给StudentSim,还低于完全没做RL的基线,拖后腿的是明显更高的严重事实错误率。模拟器不保真,会把教师往错的方向推:一个认知水平不符合真实学生、但理解能力超强的模拟器,读完再离谱的指导也能自己推出某种答案,于是给错误指导发了随机奖励,RL就朝着混乱(甚至错误)的方向优化。 StudentSim没有把真实学生实验从教育研究中取代。它把真实学生记录转化成训练阶段可反复调用的模拟反馈,使AI tutor在进入human study前完成更多轮筛选和优化。 对于需要个性化反馈的AI教师系统,这类学生模拟器、延续着近期热门的用户模拟器的思想脉络(一切人都可以模拟,建造人类的数字孪生),提供了一条颠覆性的工程路径: 学习学生如何出错,学习学生如何在指导下改变,为教师模型的强化学习提供机器学习时间尺度的反馈信号。 参考资料: 编辑:LRST **秒追ASI** **⭐****点赞、转发、在看一键三连****⭐** **点亮星标,锁定新智元极速推送!** ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=f15ce8a2&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fsz_mmbiz_jpg%2FUicQ7HgWiaUb1y6B5OM79TFzpkceWtUkI6LEwv0uYicSoM5Q3I3kDNJhxWdL3tQvbOpU3Ty7icBqnDDNd4CCu4ibiaHw%2F640%3Fwx_fmt%3Djpeg%26from%3Dappmsg) ![](https://wechat2rss.bestblogs.dev/img-proxy/?k=671197fd&u=https%3A%2F%2Fmmbiz.qpic.cn%2Fsz_mmbiz_jpg%2FRvq8Ow69CYXhzFuQfocLMkpF8cUsdzKicyKn52mjlDLYZzGlbJfyDztibYAEHMQHJiaXibBpbOno9OwhhNWnOXNlXO0icMRIIp6XAJs0snLiay4CE%2F640%3Fwx_fmt%3Djpeg%26from%3Dappmsg) [跳转微信打开](https://wechat2rss.bestblogs.dev/link-proxy/?k=b47d320e&r=1&u=https%3A%2F%2Fmp.weixin.qq.com%2Fs%3F__biz%3DMzI3MTA0MTk1MA%3D%3D%26mid%3D2652724627%26idx%3D3%26sn%3Dfde01221990dd8b079eadbc1ce67f290)

来源报道 · 1 篇 · 以下链接均前往原始媒体

← 返回精选动态 原文

更多内容