🧒 初中生也能看懂的版本
① 研究背景(为什么要做?)
过去,判断一条帖子是不是在误导人,主要靠专业的事实核查机构。平台雇人、查资料、贴标签,可这条路越来越走不动:假消息太多太快,核查员忙不过来,还总被质问“凭什么由你来定义真相”。于是从二零二一年起,推特先推出一个叫“鸟瞰”的项目,后来改名“社区笔记”。普通用户可以在有问题的帖子下面写一段补充说明,再由其他用户给这段说明打分,说它有用、有点用还是没用。平台用一个共识算法判断:只有当平时意见常常相左的人也大体认可时,这条说明才会公开显示在所有人眼前。听起来很像把判断真假的权力交还给了群众。
问题在于,群众并不是均匀出场的。社交平台上向来是极少数人生产绝大多数内容,社区笔记会不会也这样?如果给说明打分的总是同一小批人,而且这批人自己立场鲜明,那么“大家共同认可”这句话就要打上问号。这篇论文要查的正是这件事。
② 研究问题(要回答什么?)
研究要回答的其实是一个链条上的三件事。第一,打分这件事有多集中:是人人都在参与,还是少数人包办了大部分评分。第二,这些高频打分者是不是中立的志愿者:他们挑不挑内容,政治立场是否比一般参与者更极端。第三,也是最关键的一环:平台的共识算法对这批人的存在有多敏感。换句话说,如果把最活跃的那几十个人从数据里拿掉,重新按同样的规则算一遍,会有多少条说明的显示状态发生改变。
作者把前两问当作描述,把第三问当作反事实推演。他们并不声称自己能证明“少数人导致了某条说明消失”,而是问:在算法固定、笔记固定的条件下,输出对输入的微小扰动有多不稳定。
③ 研究方法(怎么做的?)
研究者拿到的是平台官方公开的完整记录,时间从二零二一年一月二十八日一直到二零二五年十二月二日。里面有两百二十多万条提交的说明、约一百三十万名至少打过分的人,以及约一亿八千四百万次评分。这个体量相当于把整个系统几年的账本全部摊开。
但账本有个缺口:它不告诉你发帖人是谁。要研究政治立场,就得借助另一份由研究者整理的政治标注样本,只保留发帖账号能被判断为民主党或共和党倾向的说明。这份子样本包含二十一万八千多条说明、十六万多条推文,涉及一万八千多个共和党倾向账号和两万多个民主党倾向账号,评分约一千八百二十万次,占全部评分的十分之一左右。
第三步是用平台开源的共识算法做重算。作者把评分表和每条说明的状态历史喂给算法,先复现平台当时给出的结果,再动手做实验:依次删掉最活跃的十人、一百人、两百人、五百人、一千人、五千人和一万人,看每条说明的状态会怎么变。他们还解除了平台“超过十四天不再重算”的锁定,让所有说明都能重新参与判定。然后比较每次结果与原始结果的重合程度。
④ 结果(发现了什么?)
打分活动高度集中在少数人身上,这是整篇论文最先摆出来的事实。打分次数的分布有一条长长的尾巴:绝大多数人只打了几次,少数人打了几万次。用幂律去拟合,指数约为三点零六,拟合明显优于指数分布。洛伦兹曲线显示,大约两成的用户贡献了八成的评分。基尼系数在全部观察期上是零点七八,属于很高的不平等。分年看,二零二一年是零点六九,二零二二年升到零点七八,此后稳定在零点八一、零点七九、零点七九附近,说明这不是刚上线时的暂时现象。
再看挑不挑内容。把每个打分者打过分的不同发帖账号数画成曲线,会发现活跃者很快就“饱和”了:他们反复回到同一批账号下面。拟合出的特征尺度是六百三十二,随机打乱后的基线是一千零八十;饱和后的账号数分别是四百二十八和九百七十。两组置信区间完全不重叠,说明这种偏好不是随机造成的。
然后是政治立场。作者用一条从负一到正的指标刻画每个打分者的行为倾向,负值偏民主党,正值偏共和党。全样本均值是负零点零八,分布接近对称。但按活跃度分成十档后,越活跃的档越往两边分:第十档明显偏向共和党一侧,双峰分离度从低档的二点八左右升到第九档的三点六三和第十档的四点一七。
最后是重算实验。只删掉最活跃的十个人,原本公开显示的十五万二千五百六十五条说明里,就有四千五百八十七条不再显示,另有七千七百六十八条被标为“不有用”的说明发生改变。删到一万人时,这一状态与原始结果的重合度最多下降六成九。而这些人只占打分者总数的极小一部分。
⑤ 讨论(这些发现说明什么?)
作者认为,这组结果说明社区笔记并没有跳出社交媒体的老规律。平台越大,参与越不均,最活跃的一小撮人既挑内容又带立场,而算法恰恰要把他们的评分算进去。共识算法的本意是要求不同政治阵营的人都点头,可如果某一方的高活跃者特别多,他们的评分就会在加权后占据更大分量。于是“跨阵营共识”可能只是表面上的,实际由一批立场鲜明的高频用户推动。
他们特别提醒,重算实验不是现实实验。删人只是在数据里做减法,算法、说明内容、其他人的评分都没动,现实中被删的人可能会换号回来、平台也可能改规则。所以能说的是系统对参与结构很敏感,不能说是某条说明因为某个人而消失。政治立场也是从打分行为反推出来的,不等于用户自己承认的党派身份。
还有一个时间维度:说明从提交到公开平均要一天以上,而推文的热度窗口通常只有三天左右。共识形成得越慢,纠正信息赶到时看到的人越少。少数高频用户如果把关太严,可能让整个流程更慢。
⑥ 结论(最终结论 + 启示)
社区核查把判断权从专业机构手里拿走,却没有真正把它分给所有人。它更像是重新分配:权力落到一小群高度活跃、立场更鲜明的人身上,而算法让这种集中变得看不见。作者因此建议,平台可以考虑给个人打分次数设上限,或者对超级活跃者做动态降权,让共识更难被少数人左右。
对普通用户来说,这条研究的提醒是:看到一条社区笔记被标为“有用”,别急着把它当成全民共识,它可能只代表那几十个最勤快、也最有立场的人。对平台来说,透明度不该只公开数据,还该公开参与结构本身。
🎓 专业 IRMaD 结构解读
I. Introduction(引言)
社区式事实核查(community-based fact-checking)的兴起,源于专业核查的两重困境:一是“谁有权定义真相”的规范争议,二是面对内容体量与传播速度时的可扩展性瓶颈。X 的 Community Notes(前身 Birdwatch,2021 年上线)是这一模式中数据最透明、算法最开放的实例:用户提交注释,其他用户以 Helpful / Somewhat Helpful / Not Helpful 三档评分;算法只在历史上评分行为多元(即彼此曾出现分歧)的评分者之间达成共识时,才把注释标为 Currently Rated Helpful(CRH)并公开显示;未达共识者保持 Needs More Ratings(NMR),被判定不有用者为 Currently Rated Not Helpful(CRNH),在界面上默认折叠。
既有文献大体沿三条线展开。其一是效能:众包核查被认为可扩展、成本低,准确率可与专业核查相比,且社区注释在跨党派受众中被认为比第三方核查标签更可信。其二是生态依赖与时效:注释撰写者大量引用专业核查机构的结论,社区系统更像混合机制而非独立替代;注释公开平均延迟超过二十四小时,多数用户根本看不到,错过注意力峰值后纠正效果大幅衰减。其三是政治不对称与参与脆弱性:共和党相关帖子被标记的比例显著更高,且难以由评分者偏差或用户构成单独解释;注释很少被采纳的贡献者更易流失。此外,一项合成数据研究系统评估了该算法,发现系统对评分者偏差与策略性操纵高度敏感。
缺口在于:上述研究多把系统当作“输入—输出”的黑箱来评估准确率或偏差,较少把参与结构本身作为解释变量,并用生产环境的算法复现做反事实检验。本文的贡献有三:以 2021–2025 年全量公开记录刻画评分活动的集中度与选择性;以行为推断的政治倾向指标检验高活跃者是否更极化;接入官方开源算法,在固定笔记与算法的条件下重算状态,度量输出对剔除高活跃评分者的敏感性。
I. Theoretical Framework & Hypotheses(理论框架与假设)
本文不设正式假设,而是把 Community Notes 视为一个社会—技术系统,沿三条分析维度组织经验检验,并把它们与共识算法的输出连接起来。理论预设来自两处:一是线上参与的幂律与重尾规律,即少数人贡献多数行为;二是“跨阵营共识”作为合法性来源的规范设计——若高活跃者本身极化,则共识的实质可能被稀释。下表给出每一维度的操作化与推断类型,这一区分对解读全文至关重要。
| 维度 | 操作化指标 | 数据基础 | 推断类型 |
|---|---|---|---|
| 参与集中度 | 每人评分次数的幂律拟合、洛伦兹曲线、基尼系数 | 全量 184M 评分事件 | 描述性 |
| 内容选择性 | 累计不同发帖账号数随评分数的饱和曲线,与随机打乱基线对照 | 政治标注子样本 | 描述性(对照随机基线) |
| 政治极化 | 行为倾向指标 L(−1 至 +1)× 活跃度十分位;GMM 双成分与 Ashman D | 政治标注子样本 | 描述性关联(不能定因果方向) |
| 算法敏感性 | 剔除前 k 名活跃评分者后重算状态,与基线做 Jaccard 相似度 | 全量评分 + noteStatusHistory + 开源算法 | 结构反事实/模型推演(非随机干预) |
需要强调,算法被设计为只在“历史上评分行为多元”的评分者之间寻求共识,因此理论上高活跃者的评分并不自动等于更大权重;本文的问题恰恰是:在真实数据上,这种设计是否足以抵御参与集中带来的失衡。
M. Materials & Methods(材料与方法)
- 研究设计与识别策略:这是一项描述性 + 结构反事实的计算传播研究,没有 DiD、RDD、IV 或随机实验。前两部分(集中度、选择性、极化)是观察数据的描述与关联分析;第三部分是把官方开源算法当作可计算的机制模型,在固定笔记集合与算法逻辑的前提下扰动评分者构成,比较输出状态。其识别力来自“机制已知且可复现”,不来自外生变异,因此结论应读作“算法输出对参与结构的敏感性”,而非现实世界中移除某类用户的因果效应。
- 数据规模:X 官方公开的完整 Community Notes 记录,覆盖 2021-01-28 至 2025-12-02,含 2,200,000+ 条提交注释、约 1,300,000 名至少评分一次的贡献者、约 184,000,000 次评分事件。官方数据不含推文作者标识,故涉及党派与选择性的分析改用带政治标注的子样本:218,382 条注释、162,228 条推文、18,251 个共和党倾向账号与 20,889 个民主党倾向账号;经注释标识连接后得 18,248,161 次评分(约占总量 10%),来自 733,750 名评分者。
- 集中度测量:对每人评分次数拟合离散幂律
P(X=x) ∝ x^(−α),x ≥ x_min,以最小化 KS 距离确定x_min,并与指数分布做似然比检验;用洛伦兹曲线与基尼系数G = ΣΣ|x_i−x_j| / (2nΣx_i)量化不平等,并按年计算G_t。 - 选择性测量:对每位评分者统计累计评分次数
r与累计触及的不同发帖账号数N(r),用饱和函数N(r) = N_asy(1 − e^(−r/τ))做非线性最小二乘拟合(SciPycurve_fit);把作者—评分配对随机重排得到零模型基线,比较N_asy与τ的 95% 置信区间是否重叠。 - 极化测量:仅保留评分次数 ≥ 30 的用户。把“作者党派 × 注释类型(M / NM)× 评分(H/SH vs NH)”联合编码为 pro / anti 信号,定义行为倾向
L = [(a_Dem − p_Dem) + (p_Rep − a_Rep)] / Σ(a_x + p_x),取值 [−1, 1],正值偏共和党。按评分总量把用户分成活跃度十分位,对每档拟合两成分高斯混合模型(GMM),以 Ashman'sD = |μ1−μ2| / sqrt((σ1²+σ2²)/2)度量双峰分离度(D > 2 视为双峰)。作者明确说明 L 是行为代理,不是自报意识形态。 - 反事实模拟设计:接入官方开源实现(twitter/communitynotes),直接操纵其两个核心输入——评分矩阵与 noteStatusHistory。处理为依次剔除最活跃的 10、100、200、500、1,000、5,000、10,000 名评分者的全部评分;同时删除 noteStatusHistory 中阻止重算的锁定字段(生产环境对超过 14 天的注释不再重算),使所有注释在每个情景下都可被重新评分。基线为不剔除任何人。算法、注释内容与其他评分者保持不变。以 Jaccard 相似度
J(B_s, S_i,s) = |N_Bs ∩ N_Si,s| / |N_Ss ∪ N_Si,s|比较每个状态(NMR / CRH / CRNH)下基线与情景的注释集合。剔除比例原文写作7.69×10^-6 %至7.69×10^-3 %(按 130 万贡献者折算应为 7.69×10^-4 % 至 7.69×10^-1 %,原文疑将比例误标为百分数,见 parse_warnings)。 - 信度与稳健性:无人工内容编码,故无 Cohen κ 或 Krippendorff α;稳健性体现在随机化零模型(选择性)、非重叠置信区间(饱和参数)与逐档 GMM/Ashman D(极化)。反事实部分未报告重复抽样或参数敏感性分析,仅报告 7 个剔除规模下的点估计。
R. Results(结果)
- 集中度:重尾且持续。评分次数分布呈重尾,幂律指数
α = 3.06 ± 0.04,x_min = 4232,KS 距离D = 0.013;与指数分布的似然比检验R = 6.49, p < 10^-4支持幂律。洛伦兹曲线显示约 20% 的贡献者贡献约 80% 的评分;全期基尼系数G = 0.78,分年为0.69 / 0.78 / 0.81 / 0.79 / 0.79(2021–2025)。2021→2022 的跃升与平台扩张同步,此后稳定,作者据此判断集中是结构性的而非采用期现象。 - 选择性:活跃者更反复。累计触及作者数的饱和曲线在真实数据中更快见顶:
N_asy = 427.9 ± 1.0、τ = 632.7 ± 2.0,随机基线为N_asy = 970.0 ± 0.7、τ = 1080.1 ± 1.0;两组 95% CI 不重叠。即评分越多的人,越倾向于在同一个小圈子的作者下反复评分。 - 极化:活跃度越高越双峰。全样本行为倾向
μ_L = −0.08、M_L = −0.11、σ_L = 0.69、偏度γ_L = 0.19,整体近似单峰且略偏民主党。按活跃度十分位后,GMM 双成分的 Ashman D 在第 1–4 档为2.80 / 2.73 / 2.82 / 2.86,第 9、10 档升至3.63 / 4.17;最高活跃档整体向正值(共和党倾向)偏移,呈明显不对称。 - 算法敏感性:极小的扰动即改变可见性。仅剔除最活跃的 10 名评分者,基线下公开可见的 152,565 条 CRH 注释中有 4,587 条不再满足共识而失去公开显示,另有 7,768 条 CRNH 注释状态改变。剔除 10,000 名评分者时,CRNH 状态的 Jaccard 相似度最多下降 69%。作者强调 CRNH 的变化同样重要:该类注释默认折叠、需用户主动点开,实质上大幅降低可见度,并可能反向影响后续共识形成。
- 推断边界:上述前三条为描述性(第二条含随机基线对照,第三条为关联),第四条为固定算法下的结构反事实。论文未报告任何真实平台层面的干预效应,也未检验“活跃导致极化”还是“极化者更活跃”的方向。
| 指标 | 数值 | 含义 |
|---|---|---|
| 注释 / 贡献者 / 评分事件 | 2.2M+ / 1.3M / 184M | 全量公开数据 2021-01-28–2025-12-02 |
| 政治标注子样本 | 218,382 注释 · 162,228 推文 · 733,750 评分者 · 18,248,161 评分 | 约占全部评分 10% |
| 幂律指数 α / x_min / KS D | 3.06 ± 0.04 / 4232 / 0.013 | 重尾显著优于指数分布(R=6.49, p<10⁻⁴) |
| 基尼系数 G(全期) | 0.78 | 20% 用户 ≈ 80% 评分 |
| G_t(2021–2025) | 0.69 / 0.78 / 0.81 / 0.79 / 0.79 | 2022 后稳定于高位 |
| 饱和参数(观测 vs 随机) | N_asy 427.9±1.0 vs 970.0±0.7;τ 632.7±2.0 vs 1080.1±1.0 | 选择性非随机 |
| 行为倾向 L | μ=−0.08 · M=−0.11 · σ=0.69 · 偏度 0.19 | 总体略偏民主党、近对称 |
| Ashman D(第 1–4 / 9 / 10 档) | 2.80/2.73/2.82/2.86 · 3.63 · 4.17 | 活跃度越高越双峰 |
| 剔除前 10 名评分者 | 4,587 / 152,565 条 CRH 失去公开显示;7,768 条 CRNH 改变 | 极小扰动即改变可见性 |
| 剔除 10,000 名评分者 | CRNH 的 Jaccard 最多下降 69% | 状态集合显著重排 |
a / D. Discussion & Conclusion(讨论与结论)
- 对“社区共识”的规范意涵。算法的合法性叙事建立在跨党派共识之上,但当高活跃评分者本身更极化、且其评分在数量上占优时,共识可能被少数人的行为分布塑造。作者因此提出:社区核查不是把认知权威分散,而是重新配置——把权力从专业机构转移到一小群高度活跃、政治上不对称的贡献者手中。
- 集中度为何是结构性的。基尼系数在采用期后稳定于 0.78–0.81,说明这不是早期用户构成造成的暂时波动;结合选择性的饱和曲线(τ 与 N_asy 均显著低于随机基线),活跃者的影响力同时来自“数量”与“反复针对同一批作者”两个渠道。
- 方法上的自我限定。①反事实只改变评分矩阵与状态历史,不模拟用户对剔除的适应、换号回归或平台规则变化;②生产环境还有实时批处理、内部锁定与未公开启发式,复现无法逐条对齐;③L 是行为代理而非自报意识形态,可能同时包含“纠正对手”的动机与内容供给差异;④作者明确指出,前两部分只能支持关联,不能支持因果方向。
- 实践启示。作者提出两类算法侧修正:对个人评分次数设上限,或对超级活跃评分者做动态降权;并提示时间成本——注释公开平均延迟已超过一天,而推文注意力窗口约七十二小时,共识形成越慢,纠正越难被看到。若高频用户构成瓶颈,延迟可能进一步恶化。
- 与既有文献的对话。本文把“共和党帖子更易被标记”的政治不对称发现,从结果层推进到参与结构层:不仅注释对象有偏,打分者的构成与活跃度分布本身也有偏。它同时回应了合成数据研究的警告——算法对策略性操纵敏感——但用的是真实生产数据与官方实现,外部效度更高。
- 局限与后续。仅覆盖 X 一个平台;政治标注样本只占评分总量约一成,外部推广需谨慎;未做剔除规模的连续扫描与置信区间估计;未检验平台若真的限权,活跃者是否会迁移或分裂。后续可追踪限权政策上线前后的状态稳定性,或用代理指标检验“活跃—极化”的双向关系。
🧠 IRMaD 思维导图
mindmap
root((社区笔记超活跃少数派))
I 引言
专业核查收缩
社区笔记成替代
共识算法定可见性
R 问题
打分成多集中
活跃者是否更极化
算法对少数人多敏感
M 方法
全量公开数据
一亿八千多万评分
政治标注子样本
开源算法重算
剔除最活跃者
R 结果
基尼系数零点七八
两成人给八成评分
活跃档更偏共和党
十人即改四千条
a 讨论
描述性关联为主
反事实属模型推演
行为代理非自报
共识或被少数塑造
D 结论
权力未被分散
集中到极化少数
建议限权与降权
众智难以实现
图:本研究的 IRMaD 思维导图。蓝色 I 引言;橙色 R 研究问题;绿色 M 方法; 橙色 R 结果;紫色 a 讨论;红色 D 结论。