arXiv 预印本(cs.CY / cs.SI),2026-10-30 提交,abs 页无期刊录用信息;Zenodo 存档条目自述为 PNAS 投稿版,代码与合成示例数据已公开(github.com/paganick/llm-recsys-twitter-yougov-PNAS)。

大模型推荐器经由内容偏好制造人口不平等

Nicolò Pagan, Petter Törnberg, Christopher A. Bail 等 4 人 · arXiv preprint (cs.CY / cs.SI) · 2026 · arXiv: 2610.41854
原题:LLM Recommenders Produce Demographic Inequality Through Content Preferences
Open Access 新颖度 0.82

🧒 初中生也能看懂的版本

① 研究背景(为什么要做?)

今天你刷到的每一条帖子,几乎都不是随机出现的,而是被一套排序系统挑出来放在你眼前。过去这套系统主要看点赞、转发和关注关系,现在越来越多平台把大语言模型接进来,让模型直接读帖子内容,判断哪条更值得推荐。X 用 Grok 改造推荐,Bluesky 让用户用对话定制信息流,Instagram 也允许用户直接改推荐主题。
这带来一个容易被忽略的问题:模型可能从来不问作者是男是女、多大年纪、什么政治立场,却仍然让某些人群的声音更容易被看见。原因是它偏爱某种写法、某个话题、某种情绪,而这些特征在不同人群之间并不平均分布。作者把这种“没看身份、却分出高下”的现象叫作经由内容产生的人口不平等。

② 研究问题(要回答什么?)

这篇论文要回答的问题很具体:如果把作者的身份信息全部拿掉,只让模型读帖子文字,它还会不会系统性地让不同人群获得不同的曝光机会。作者进一步把不平等进入推荐过程的路线拆成三条:第一条是模型对内容本身的偏好,比如偏爱长文、负面情绪或时政话题;第二条是平台信号,比如点赞数、转发数、粉丝量;第三条是直接把作者的性别、年龄、种族等身份写进提示词。
这三条路线的政策含义完全不同。如果问题只出在第三条,那么隐藏身份就够了;如果前两条也在起作用,那么“对身份视而不见”并不能带来公平。作者想做的,就是把这三条路线分开测量,看每一条各自贡献多少。

③ 研究方法(怎么做的?)

作者用了一个很少见的数据组合:一千名参加过问卷调查的推特用户,每人十条帖子,一共一万条,每一条都能对上本人自报的九项人口特征,包括性别、年龄、种族、政治立场、党派、教育、收入、婚姻和宗教虔诚度。身份不是猜出来的,而是问卷里问出来的,这避开了“用文字猜身份、再用文字做推荐”的循环论证。
接着他们做了一场控制实验。三家大模型——OpenAI 的 GPT-4o Mini、Anthropic 的 Claude Sonnet 4.5、Google 的 Gemini 2.5 Flash——各自面对一百条帖子的候选池,被要求挑出十条。实验交叉了三个因素:六种推荐目标(中立、大众兴趣、流行、互动、信息、争议),五种信息条件(只看文字、加作者信息、加帖子互动数据、两者都加、再加问卷身份),一共九十种组合,每种组合重复一百次,合计九千次排序、九万条被推荐的帖子。
为了公平比较,一万条帖子先按发布时间排好,切成一百个时间接近的池子;所有条件用的是同一批池子,模型只能看到编号和内容,温度固定为零点三。

④ 结果(发现了什么?)

先看最干净的条件:模型只看文字,不知道作者任何信息。结果模型的偏好非常一致——更长的帖子、更多新闻和社会议题、更负面也更有观点的表达更容易被挑中,带提及符号的帖子反而被冷落。在中立目标下,被推荐的帖子里新闻与社会议题比被跳过的帖子高出二十七点六个百分点;被推荐帖子平均长出十四到四十个字符不等。
这些偏好落到人身上,就变成了人群之间的差距。六十五岁以上的作者被推荐的比例平均高出三点五个百分点,二十五到三十四岁的作者低二点七个百分点。政治立场呈现两头高、中间低的 U 形:左翼高三点八,右翼高二点六,中间派低四点九。种族方面,黑人作者在三个模型里都被低推一点六到二点七个百分点。
更关键的是,把可测量的内容特征(话题、长度、情绪、风格)放进模型一起控制后,七十八个显著的“模型—人群”关联里,系数中位数只缩小了三成多,仍有三分之二左右保持显著。也就是说,内容能解释一部分,但解释不完。

⑤ 讨论(这些发现说明什么?)

作者认为,这个结果说明“人口盲视”不等于“人口中立”。模型不需要讨厌某个群体,也不需要知道作者是谁;它只要偏爱某种表达方式,而这种表达方式在人群之间分布不均,推荐结果就会自动带上人口色彩。就像一场比赛只比谁嗓门大,看似对所有人一视同仁,实际上已经把习惯小声说话的人筛掉了。
平台信号是第二层放大器。当模型能看到点赞、转发和粉丝数时,它会更用力地追这些数字,而被推荐作者的平均粉丝数从文字条件下的约五万七千涨到约十一万六千。过去积累的关注度就这样被带进下一轮推荐,形成滚雪球。相比之下,把作者的九项身份直接写进提示词,改变反而不大,因为模型早已从文字和平台信号里读到了它需要的东西。
作者也提醒,推荐目标本身会改变差距大小:要求“有争议”时,内容造成的差距最大;要求“流行”时最小;年龄这个属性甚至在两种目标下会调转方向。

⑥ 结论(最终结论 + 启示)

最终结论是:大模型推荐带来的不平等,可以在它知道作者身份之前就已经发生。只要模型对内容有偏好,而内容又与人群相关,曝光差距就会自己长出来;平台信号再把这个差距放大一轮。
这对治理的启示很直接。仅仅删掉性别、种族、年龄这些字段,只能挡住“直接歧视”这一条路,挡不住经由内容偏好和互动数据流动的间接歧视。作者建议,平台在评估推荐系统时,不能只问“有没有用受保护属性”,还要问“系统在奖励什么样的表达”,并把曝光结果按人群拆开持续监测。对普通人来说,这也提醒我们:你以为的中立算法,其实一直在替社会回答“谁的话更值得听”。

🎓 专业 IRMaD 结构解读

I. Introduction(引言)

推荐系统长期被视为注意力分配的基础设施,其排序逻辑决定哪些言说者获得可见性。既有审计已经记录了传统推荐器与 LLM 排序器的流行度偏差、人口偏斜与极化放大,但这些研究多半依赖从文本或主页推断人口属性,推断噪声与循环性问题难以排除:用于推断身份的语言线索,恰恰可能也是排序本身使用的线索。本文的贡献在于用独立观测的人口真值切断这一循环。作者使用 YouGov–Twitter/X 关联数据,1,000 名受访者的 10,000 条帖子配有九项问卷自报属性,在 3 家 LLM 供应商 × 6 种推荐目标 × 5 种上下文条件的全因子配对设计中,让模型从 100 条候选帖中选 10 条,从而把人口不平等拆成三条可分离的进入路径:内容偏好、平台互动信号、身份显式披露。研究问题不是“LLM 有没有偏见”,而是“在不提供任何受保护属性的条件下,偏斜是否仍然产生、由什么承载、在什么目标下被放大”。

I. Theoretical Framework & Hypotheses(理论框架与假设)

文章把不平等进入推荐管道的机制区分为三条路径,并用上下文条件逐一操作化。三条路径并非互斥,而是依次叠加:文本条件只允许 P1 起作用,平台条件加入 P2,人口条件再加入 P3。由此可以估计每条路径的增量贡献,而不是把总差异笼统归因于“算法偏见”。

编号路径操作化理论预期主要结果
P1内容偏好仅帖子文本 + NLP 特征(话题、长度、情绪、毒性、风格)模型对某些表达形式的偏好与作者人口相关,无需身份即可产生偏斜成立:文本单独即产生年龄、意识形态、种族梯度
P2平台互动信号作者粉丝/关注/发帖量 + 帖子点赞/转发既有关注度差异被带入排序,并沿原方向放大偏斜成立:帖子点赞 R² 由 0.003 升至 0.023,被推荐作者平均粉丝由约 5.7 万升至约 11.6 万
P3身份显式披露九项问卷属性注入提示词若存在直接歧视,应有明显增量基本否定:多数类别贴近 y=x,六个目标中五个的增量最小

理论对话落在三条线上:算法审计中的代理歧视(proxy discrimination)、推荐系统的流行度偏差与算法混淆反馈回路,以及近年用路径特定方法区分直接与间接差异的公平性文献。作者据此主张,公平性不仅要问模型“知道什么”,还要问它“奖励什么样的表达”。

M. Materials & Methods(材料与方法)

R. Results(结果)

文本条件关键量估计值含义
News & Social Concern 份额差+27.6 个百分点中立目标下推荐帖相对被跳过帖
话题 R² / 文本长度 R²0.044 / 0.02925 个特征中最强的两项
情绪极性 R² / 意识形态 R²0.014 / 0.004内容强于人口
65 岁以上 / 中间派偏斜+3.5 / −4.9 个百分点文本条件,供应商平均

a / D. Discussion & Conclusion(讨论与结论)

🧠 IRMaD 思维导图

I 引言 R 研究问题/假设 M 方法 R 结果 a 讨论 D 结论
mindmap
  root((大模型推荐与人口不平等))
    I 引言
      推荐系统分配注意力
      身份多由文本推断
      推断与排序循环论证
      三条不平等路径
    R 框架
      P1 内容偏好
      P2 平台互动信号
      P3 身份显式披露
      盲视不等于中立
    M 方法
      YouGov 一千人一万帖
      九项问卷人口真值
      三家模型六目标
      五种上下文条件
      九十条件九千次排序
      条件 logit 配对设计
    R 结果
      偏爱长帖与时政
      新闻议题高二十七点六
      老人高三点五个点
      中间派低四点九
      平台信号放大差距
      身份披露增量很小
    a 讨论
      偏差可经内容代理
      目标决定差距大小
      争议框架最强
      流行框架最弱
    D 结论
      盲视不等于中立
      隐藏身份挡不住代理
      监测内容奖励结构
      按人群审计曝光

图:本研究的 IRMaD 思维导图。蓝色 I 引言;橙色 R 研究问题;绿色 M 方法; 橙色 R 结果;紫色 a 讨论;红色 D 结论。