arXiv 预印本 · cs.AI · 2026-10-23 · 未经同行评审 · 随文发布模拟器与全部结果文件

生成式自适应学习中的算法漂移

Firuz Kamalov, Hana Sulieman, Ahmed El Sayed 等 5 人 · arXiv 预印本 · cs.AI · 2026 · arXiv: 2610.31041
原题:Algorithmic drift in generative adaptive learning
Open Access 新颖度 0.60

🧒 初中生也能看懂的版本

① 研究背景(为什么要做?)

想象你请了一位私人家教,它每次看完你的作业,就决定下一道题出多难。如果它把你的紧张、口音或者不地道的表达误当成“没学会”,就会给你更简单的题;而你把简单题做对了,它反而更确信你底子差。几个月下来,一个本来能挑战难题的学生,被稳稳按在低水平上。这就是这篇论文说的算法漂移:不是某一次判错,而是小错误在“判分—出题—作答—再判分”的回路里越滚越大。

为什么现在要关心这件事?因为学校正把生成式人工智能请进课堂,让它实时判断学生会什么、该学什么。过去的伦理讨论大多只看一眼:训练数据里各群体比例是否均衡,模型此刻的输出有没有明显歧视。这就像只在开学期中检查一次体检报告,却不管后面一整个学期身体怎么变化。学习本身是长期过程,今天少给一道难题,明天就可能少学一个概念,一学期下来差距就固化了。作者因此主张:公平不能只在起点检查,而要看整条学习轨迹有没有被悄悄压弯。

② 研究问题(要回答什么?)

这篇论文想问三个层层递进的问题,一个比一个更接近解决办法。第一个问题是:一个在起点看起来完全公平的智能家教,到底在什么条件下会慢慢把两个群体分开?这种分开能不能用公式算出来,而不只是跑完模拟才看见?

第二个问题更具体:今天的大语言模型在给学生的主观题打分时,会不会真的对带有口音或方言痕迹的答案更苛刻?如果会,这种偏差大概有多大?因为整个漂移故事都建立在“判分有偏”这个前提上,前提不成立,后面的推演就只是纸上谈兵。

第三个问题最实际:能不能给系统加一层很轻的规则,在它把学生长期按在简单题里的时候,强制重新测一次真实水平,从而打断这个越陷越深的回路?以及,强化学习里那些现成的“多试试别的选项”的办法,能不能直接顶替这层规则?作者怀疑不能,因为通用探索是为了减少不确定,而不是为了纠正某一个群体被系统性低估。

③ 研究方法(怎么做的?)

研究团队没有找真人做实验,而是在电脑里造了一万个虚拟学生。每个虚拟学生都有一个看不见的“真实水平”,从零到一之间取值;还有自己的学习速度,有的快有的慢,也会慢慢遗忘。系统里有五十个知识点,难度从最基础到最进阶排开,家教每轮根据自己对学生的估计挑一道题。

关键的一步是加噪声。团队把学生分成两组:八成是“标准表达组”,两成是“带语言摩擦组”,两组一开始的水平分布完全一样。带摩擦组每答对一道题,有一定概率被判成答错,这个概率就是判分偏差。为了不凭空拍数字,他们先做了实测:准备了四十道概念正确的问答题,每道都写成一个标准英语版本和一个带二语特征的版本,内容一字不改,然后让三个开源模型当阅卷人。受影响最大的那个模型,把二语版本里约五个百分点的正确答案判成了错。

接着他们把模拟跑起来:一万名学生、一百个时间步、五十次独立重复,用两种“大脑”来估计学生水平,一种是透明的在线估计器,一种是深度知识追踪网络。最后他们设计了一个叫时序公平稳定器的补丁:一旦发现某个学生长期被安排低于同伴水平的题目,就强制出一道略高于当前估计的探测题;学生答对,系统就把估计值往上抬,并且不许再掉回去。

④ 结果(发现了什么?)

结果分成两半:先看判分有多偏,再看偏差会滚成多大的坑。实测部分,受影响最大的模型对标准英语答案一次都没误判,对二语版本却误判了百分之五;另外两个模型没有硬性误判,但它们对二语答案的“信心”分别在九成八和六成二的题目上更低,说明偏差是连续的,只是有没有跨过判错那条线而已。

模拟里,判分偏差取百分之五时,标准表达组最后平均能力达到 0.922,带摩擦组只有 0.884,两者相差 0.038,后者大约少学了一成。更严重的是系统“心里的账”:它以为带摩擦组只有 0.593 的水平,真实水平却是 0.884,等于把一个能学进阶内容的学生记成了后进生。当偏差升到一成五,差距扩大到 0.147;升到三成,差距达到 0.306,几乎是断崖式下滑。

补丁效果明显:加了稳定器后,带摩擦组最后达到 0.972,差距只剩 0.003。而常用的三种“多探索”办法都不行:随机探索只把差距降到 0.035;乐观探索降到 0.018 但依然存在;按概率抽样的办法看似降到 0.019,代价却是全员降难度,标准组自己也从 0.922 掉到 0.856。

⑤ 讨论(这些发现说明什么?)

这项研究最反直觉的地方,是它说系统每一步其实都算得没错。判分模型按自己的标准打分,出题策略按自己的估计选题,每个环节单独看都合理;错的是它们连成了一个圈:估计偏低导致题目偏简单,题目偏简单让学生练不到真本事,练不到真本事又反过来“证实”了估计偏低。作者把这个圈叫作闭环,并指出一旦判分偏差越过某个临界点,学生的水平不是慢慢落后,而是像滑梯一样按固定比例往下掉。

这也解释了为什么“多探索”不管用。通用探索的目的是搞清楚“这道题难不难”,探一次没探到就退回来;而这里需要搞清楚的是“这个学生是不是被冤枉了”,必须在他被长期安排简单题之后主动重测,并且测出来的成绩要能覆盖之前的坏印象。两者触发条件根本不同:一个看不确定性,一个看补救循环持续了多久。

作者还算了笔账:在偏差百分之五时,带摩擦组有四成的学习步骤被安排成补救内容,标准组只有两成九,等于把教学资源花在了不需要补的人身上。这不是某个坏人的恶意,而是系统在“个性化”的名义下自动完成的分层。

⑥ 结论(最终结论 + 启示)

一句话总结:公平不是上线前检查一次就完事,而是要在整个学习过程中持续维护。作者给出的办法并不复杂——定期强制重测学生的真实上限,并且一旦测出更高水平,就不许系统再把它改回去。在模拟里,这个小补丁几乎抹平了差距,还顺带让标准组也学得更好,因为队列里落后的标准组学生同样会被重测。

但作者很克制地划了边界:这些学生全是虚拟的,判分偏差只测了四十组题、只测了三个模型,真实课堂里的老师、同伴、多模态作业都没有进模型。稳定器之所以效果这么好,部分原因是模拟中“答对探测题”立刻等于拿到真实水平,现实里还会有挫败感和抵触。所以结论应当读成:这个机制值得被设计与监管,而不是已经被证明有效;下一步要拿真实平台的学习日志去验证。

🎓 专业 IRMaD 结构解读

I. Introduction(引言)

生成式人工智能把个性化辅导从预设决策树推向实时生成,教育技术伦理的主流讨论却仍停留在静态偏差:审计训练数据的群体代表性,或在部署前检验单点输出是否满足统计平价(Kizilcec & Lee, 2022;Mehrabi et al., 2021)。学习是纵向轨迹,风险不是瞬时错误而是累积偏离。本文把算法漂移定义为:初始评估中微小且群体不对称的观测误差,经“估计—出题—作答—再估计”的闭环逐轮放大,最终固化为系统性不平等。

既往研究已证明误差会复利:重复风险最小化(Hashimoto et al., 2018)、performative prediction(Perdomo et al., 2020)、预测性警务的失控回路与学习分析中的马太效应;Liu 等(2022)发现按平均准确率优化的知识追踪会生成不公平课程。但它们或只描述一般机制,或止于经验观察,缺少相位结构刻画,也未把测量、仿真与干预串成可检验的链。本文四项贡献:(i) 形式化为学习者—导师耦合动力系统并给出闭式诱捕阈值与分岔证明;(ii) 在三个开源权重模型上实测触发漂移的非对称判分噪声;(iii) 提出时序公平稳定器(TFS)并与 ε-greedy、UCB、Thompson 采样对照、刻画失效条件;(iv) 提出长周期审计治理框架。对公共管理与教育治理而言,核心命题是:算法公平不是部署时的一次性勾选,而是闭环系统的时间属性——同一模型在 t=0 合规,仍可能在 t=n 系统性剥夺某群体的学习机会。

I. Theoretical Framework & Hypotheses(理论框架与假设)

理论把导师拆成“状态估计器 + 内容策略”,与学习者、观测通道构成闭环;这是自贝叶斯知识追踪以来自适应导师的规范架构,深度追踪与生成式系统只是换了估计器与决策规则。

假设 1:单一均值场知识点,真实能力 θ_t、难度 β_t,作答服从 Rasch 链接 s(θ,β)=σ(θ−β);导师经假阴性通道观测,翻转概率 ε_g(参照组 0,弱势组 ε),观测成功率 s_obs=(1−ε_g)s;策略准静态地把观测成功率调到固定目标 p*;学习为 θ_{t+1}=clip(θ_t+αg(θ_t−β_t)−λθ_t),仅当 |θ−β|<ω 时增益为正。

命题 1:令 c_ε=σ⁻¹(p*/(1−ε))、ε*=1−p*/σ(ω)。(i) ε<ε* 时弱势组被服务更简单内容,缺口 δ(ε) 随 ε 严格递增,但两组仍在最近发展区内学习;(ii) ε≥ε* 后服务难度离开该区,学习指示函数归零,能力按 θ_{t+1}=(1−λ)θ_t 几何衰减;(iii) 渐近差在 ε* 处不连续,构成从“有进度但欠挑战”到“被困且下滑”的分岔。推论 1:每 τ 步强制插入落在最近发展区内的探针,则弱势组能力存在与诱捕条件无关的下界。

编号问题 / 命题对应理论
RQ1初始公平何时分层耦合动力系统
RQ2判分是否存在非对称假阴性观测通道偏差
RQ3公平正则能否打断回路策略修正
P1 / C1阈值 ε* 与周期重入均值场与探针

TFS 的四条条件由此推出:探针信息可读、存在队列参照、探针不伤害学习者、探针能落回最近发展区;任一失效则保证弱化,这正是 4.8、4.9 节失效实验的依据。

M. Materials & Methods(材料与方法)

范式:离散时间 基于智能体的蒙特卡洛仿真(ABM + Monte Carlo),非 SD/DES;环境为部分可观测马尔可夫决策过程,学习者—导师构成耦合动力系统,agent 即模拟学习者群体,个体携带潜在能力、学习率、估计能力、服务难度史与干预状态。

R. Results(结果)

阶段一(RQ2):40 组配对题上,Qwen2.5-7B-Instruct 对二语变体假阴性 0.050、对标准英语 0.000,ε̂=+0.050,Cohen's h=+0.45;校准答对概率在 95% 题目上对二语更低(ΔP=+0.055,p=0.043),但精确 McNemar 检验不显著(p=0.5)。Phi-4-mini 与 Mistral-7B 无硬假阴性,置信度却分别在 98% 与 62% 题目上偏低;三者合并 ε̂=+0.017,方向从未反转,假阳性与变体无关。

条件指标结果结论
对照 ε=0.05末能力 / Δ0.884 / 0.038 [0.037, 0.039]参照组 0.922,ρ=0.911
对照 ε=0.05G_b / D−0.047 / 0.268能力受损温和,评估记录严重失真
TFS末能力 / Δ / G_b0.972 / 0.003 / −0.026近完全对齐,参照组升至 0.975
ε-greedyΔ / 末能力0.035 / 0.888探后回撤,基本无效
UCBΔ / 末能力 / D0.018 / 0.901 / 0.283抬高估计而不校正,漂移上升
ThompsonΔ / 末能力0.019 / 0.836全员降难度换表面公平
LSTM-DKT a=0.7 ε=0.05Δ / G_b / G_β−0.003 / −0.015 / +0.022能力差距推迟,低估与暴露照常
对照 ε=0.15 / 0.30Δ0.147 / 0.306(TFS 0.089)过阈值加速,稳定器降级

a / D. Discussion & Conclusion(讨论与结论)

本文把“误差会复利”推进为可检验的机制链,并给出相位结构:危害不是平滑累积,而是在 ε* 处分岔——阈值以下是“被欠挑战但仍在进步”,阈值以上是“被困且几何下滑”。政策含义直接:干预不必压低平均误差,而必须保证周期性最近发展区重入,这正是通用探索理论上不够用、TFS 以循环时长而非不确定性触发的原因。

🧠 IRMaD 思维导图

I 引言 R 研究问题/假设 M 方法 R 结果 a 讨论 D 结论
mindmap
  root((算法漂移与公平))
    I 引言
      静态公平审计不够
      学习是长期轨迹
      个性化变成自动分层
      公平即可持续性
    R 问题与命题
      问题一 何时分层
      问题二 判分偏差多大
      问题三 能否打断回路
      命题一 诱捕阈值
      推论一 周期探针
    M 方法
      一万名虚拟学习者
      一百步 五十知识点
      项目反应理论出题
      在线追踪与深度追踪
      三个开源模型配对打分
      五十次独立重复
    R 结果
      弱势组零点八八四
      参照组零点九二二
      差距零点零三八
      稳定器零点零零三
      探索基线无效
      阈值约零点零四
    a 讨论
      偏差被闭环放大
      低估不等于低能
      资源错配四成对两成九
      通用探索不等于公平
      探针有副作用
    D 结论
      公平是时间属性
      纵向审计取代一次性认证
      探针机制写入标准
      真实学生仍待验证
      服务可持续目标四

图:本研究的 IRMaD 思维导图。蓝色 I 引言;橙色 R 研究问题;绿色 M 方法; 橙色 R 结果;紫色 a 讨论;红色 D 结论。