🧒 初中生也能看懂的版本
① 研究背景(为什么要做?)
很多短视频博主都相信,平台会悄悄压低某一派政治内容的曝光,这就是常说的“限流”或“影子封禁”。
在 TikTok 上,这种说法和政治内容绑得特别紧:用户、记者和倡导团体常说,某个争议议题的一方被平台故意“藏”了起来,别人刷不到。你可能也听过类似的抱怨——“我这条视频明明不错,播放量怎么突然掉下去了?”
这可不只是网友吐槽。它会改变博主发什么、广告商把钱投给谁,甚至影响国会听证和监管政策。可麻烦在于,平台从不公开它怎么给视频排序,所以外人只能“从外面比较”来猜。
普通人怎么“证明”自己被限流?一项美国代表性调查发现,最常见的办法是看自己的互动数据是不是突然下滑(44%),其次是用第二个账号去看自己的视频还刷不刷得到(42%)。倡导机构的做法也类似:一份流传很广的报告把六十个话题标签在 TikTok 和 Instagram 上的发帖总数摆在一起比,却没有给出任何误差估计;一篇发表在同行评审期刊上的研究,则把两边账号的视频统统“倒进一个大池子”,再看差异显不显著。
作者注意到,这些比较几乎都没回答一个看似技术、其实要命的问题:到底什么才算一次“独立的观察”?是一个账号、一条视频,还是同一条视频每小时被记录一次的读数?这篇论文要证明,恰恰是这个选择本身,决定了“有没有限流”的答案。历史上也有先例:“YouTube 算法把人推向极端”这个流行说法,就是在改用以用户为单位的数据重新分析之后被推翻的。
② 研究问题(要回答什么?)
这篇论文想弄清楚,TikTok 会不会因为视频的政治立场,悄悄压低争议议题中某一方的曝光。
为了回答它,作者挑了三个在美国吵得最凶的议题,每个议题都有针锋相对的两方。具体如下:
- 美国移民执法(ICE):支持方 vs 反对方;
- 特朗普相关内容:挺特朗普 vs 反特朗普;
- 以色列与巴勒斯坦:亲以色列 vs 亲巴勒斯坦。
作者一开始其实倾向于认为可能真有差异:一来“限流”的说法流传太广,二来已有研究(Ibrahim 等,2026)报告,2024 年美国大选期间 TikTok 的推荐算法被指偏向共和党立场的内容。
围绕这个大问题,论文层层递进地问了三件事。具体如下:
- 问题一:如果用媒体和不少研究最常用的“大池子合并比较”,数据会不会显示“有限流”?
- 问题二:换成以“账号”为单位的更严谨算法,这个差距还在不在?如果不在,这个“没有”是真没有,还是只是样本太小、看不出来?
- 问题三:同一份数据,两种算法为什么会给出截然相反的答案?一次靠得住的平台审计,到底该怎么做?
③ 研究方法(怎么做的?)
作者的做法可以比作给两千多条视频每小时“量一次体温”,然后认真想清楚:这么多读数里,到底有几份是真正独立的信息。
第一步:先选好账号,再开始记录。作者通过谷歌搜索找出每个议题两边的代表性声音,按账号公开表达的立场分到“支持”或“反对”一方,再按粉丝量分成从小号到千万级大号的六个档位,让两边在各个档位都有账号。最终名单共 67 个账号,粉丝从约两千五百到两千两百万不等,既有政党组织、竞选团队、军方和新闻机构的官方号,也有评论员、独立博主和一线记者。名单在数据收集开始前就定死了,所以“选了谁”跟后来的结果无关。
第二步:每小时抄一次“计数器”。从 2026 年 4 月 3 日到 28 日,程序每小时读取一次每条视频公开显示的播放、点赞、评论、分享、收藏数以及账号粉丝数,一共跑了 604 轮,602 个间隔里有 598 个恰好是一小时。最后得到 2,753 条视频、556,946 条小时读数,每条视频被记录次数的中位数是 99 次。作者直接读公开计数,而不是用某个账号去刷个性化推荐页,所以“推荐页因人而异”不会混进测量。
第三步:请三位“AI 评委”判断视频是不是在讲这个议题。GPT-4o、Gemini 和 Claude Sonnet 三个大模型分别读视频内容(阿拉伯语也直接读原文,不翻译),依次回答“和议题相关吗 → 属于哪个议题 → 站哪一边”,少数服从多数。结果有 940 条视频属于三个议题之一。作者还亲手标注了 200 条分层抽样视频和 100 条三个模型意见不一的“难题”来核对:在“这条视频算不算该议题”这个关键判断上,AI 与人工的吻合度(F1 值)分别是 0.88 和 0.80。
第四步:立场不听 AI 的,听“阵营”的。AI 在非英语内容上可能不太可靠,所以作者故意限制它的权力:AI 只负责筛出“在议题上”的视频,而每条视频的立场直接取它所属账号事先划定的阵营。事后核对,AI 给单条视频判的立场与账号阵营有 93.1% 一致,而且阿拉伯语视频并不比英语差。
第五步:一个账号只算“一票”。“触达”用每千粉丝播放量来衡量(播放量 ÷ 粉丝数 × 1000);另外还看“每次观看得到多少互动”(点赞、评论、分享、收藏之和 ÷ 播放量)和一个“速度”指标。每条视频取它被观察到的最高值,再取账号内所有视频的中位数,这样不管一个账号发了多少条视频、被读了多少次,都只贡献一个数。然后比较两边的账号,用“把支持/反对标签在账号之间随机洗牌两万次”的办法来算显著性。整套分析方案(三个议题 × 三个指标、以账号为单位、用哪些检验、前后两段时间分别验证)都在跑任何检验之前就预先登记、封存了。
④ 结果(发现了什么?)
用常见的合并算法,数据看上去像“铁证如山”地显示存在限流,可一旦改成以账号为单位来比较,这个差距就消失了。
把每小时的读数都当成独立样本来比,以巴议题的 p 值是 6.7×10−147——小数点后面跟着一百四十多个零;特朗普议题的 p 值更是小到电脑都没法精确表示。
三个议题的效应量(Cliff's δ,取值 −1 到 1,0 表示没差别)只有 0.07、0.08、0.06,p 值分别是 0.93、0.71、0.81,校正多重检验后 q 值都在 0.93 左右——完全不显著。
功效分析显示,如果真实差距有 δ = 0.6 那么大,这套设计有 76%–89% 的把握抓到它。按 95% 的置信度,可以排除特朗普议题上大于 0.49、以巴议题上大于 0.51 的触达差距;更小的差距则无法排除。
唯一站得住的差异,方向和“限流”正好相反。同样的样本量,在另一个指标上就测出了清楚的差别:反对方(反特朗普、亲巴勒斯坦)的视频每被看一次,得到的互动更多。特朗普议题 δ = −0.51,以巴议题 δ = −0.64(负号表示挺特朗普、亲以色列一方更低),校正后 q 值分别为 0.025 和 0.021,置信区间都不包含零。拆开看,差距最大的是收藏(−0.69 和 −0.64),点赞和分享也明显,而评论几乎没差(−0.07 和 −0.10)。
那合并算法为什么会说“有”?作者找到了两个原因。
- 重复计数:同一条视频相邻两小时的读数几乎一模一样(组内相关高达 0.98)。173,050 条议题内读数,真正的信息量只相当于约 960 条独立视频(“设计效应”约 180 倍),而这些视频又只来自几十个账号。作者还做了个“假实验”:把立场标签在账号之间随机乱贴 3,000 次(这样真实差距一定是零),账号级检验只有约 4% 的时候误报,合并算法却有 95% 的时候报“显著”。
- 拿苹果比橘子:看上去“被压”的一方账号更大——亲巴勒斯坦账号的粉丝中位数是亲以色列账号的 3.6 倍,而播放量并不随粉丝数等比例增长,“每千粉丝播放量”天然让大号吃亏;两边视频进入观察时的“年龄”也不同(亲以色列视频中位已发布 128 小时,亲巴勒斯坦不到 1 小时);亲巴勒斯坦账号还大多发阿拉伯语内容。只看英语视频时,账号级触达差距依旧不显著(δ = −0.21,p = 0.42),互动差距反而更大(−0.76)。
此外,在控制粉丝数和视频年龄的逐条视频回归里,三个议题都没有显著的触达差异;唯一接近边缘的特朗普议题(p = 0.07),换用更适合“账号不多”情形的野生聚类自助法后,p 值升到 0.22。作者列出 24 种都说得过去的分析方案,其中 19 种“显著”,但显著与否几乎完全由分析单位决定:以“视频 × 小时”为单位时全部显著;以账号为单位时只有一半显著,而且显著的恰好都是互动指标,触达指标一律不显著。
⑤ 讨论(这些发现说明什么?)
这项研究最重要的提醒是:数据多,不等于信息多。
打个比方:你想知道班上男生和女生谁更高,于是给每个同学每小时量一次身高,连量一百次。表格里多了几千行,可你并没有多测几个人——同一个人的一百次读数几乎一样。如果把这几千行当成几千个人去算显著性,哪怕两组其实差不多,也很容易算出“差异极其显著”。论文里发生的正是这件事:p 值会随着“行数”增加一路缩小,而真正的差距大小(效应量)几乎纹丝不动。
第二个提醒是比较对象要可比。被说“遭限流”的一方,账号更大,视频被观察时处在不同的“生命阶段”,以巴议题上还多用阿拉伯语;而数据收集默认用的是美国地区设置,也就是说,比较的其实是“摆在美国观众面前的阿拉伯语内容”和英语内容。这些差别都和立场“绑”在一起,很容易被误读成平台在压某一方。
第三,反对方的观众更“投入”。收藏和分享是观众最费心的动作,差距恰恰最大;评论则差不多。这更像是受众在主动动员,而不是平台在压制。作者也很谨慎:互动多本身不能完全排除限流,因为理论上平台也可能专门压那些引发强烈反应的内容;但和“触达没有差别”放在一起看,“观众更投入”是更说得通的解释。而且这种互动差异是相关性的,可能只是反映了“什么样的人在关注这些账号”。
第四,没有人作弊,结果却被放大了。分析者收集每小时数据(因为数据越密越好),把它们合在一起算(因为行数越多越好),再报告显著的那组比较——每一步都不像“数据造假”,最后却得到一个被放大了两个数量级的结论。记者和倡导机构做的也基本是同一类比较,而“显著”的结果更容易传播,这让问题更严重。
最后,作者强调:这不等于证明平台是公平的。外部观察只能说“如果有限流,它不会大于某个程度”;要真正证明因果,需要平台配合做随机实验。
⑥ 结论(最终结论 + 启示)
在这批账号和三个争议议题上,没有证据表明 TikTok 对某一方政治内容做了中等以上程度的限流。
人们眼中的“限流”,在这份数据里更好的解释是:反对方拥有一群更投入的观众,而不是被平台压住了。同时,这篇论文也说明,从公开数据里判断平台有没有区别对待,比现在大家以为的要难得多。
作者据此给出了一份可信“可见性审计”的五条守则。具体如下:
- 先弄清楚“独立单位”是什么,并在做任何合并检验之前,报告“设计效应”和有效样本量;
- 像本文这样按账号划分阵营的比较,独立单位就是账号;如果怀疑限流发生在单条视频上,要用能处理“嵌套”结构的模型,不能把重复的视频或快照当成独立样本;
- 把差距归因于立场之前,先排除账号大小、视频年龄、内容语言和地区的干扰;
- 预先登记分析方案,并公布所有合理方案的结果(规格曲线),而不是只挑最好看的那一格;
- 报告统计功效,把结论写成“有上界的判断”,真正的因果结论留给平台内的随机实验。
对普通读者来说,下次看到“某某内容被限流”的截图或报告时,不妨先问三个问题:比的是账号还是快照?两边账号的大小、语言可比吗?分析方案是事先定好的吗?
🎓 专业 IRMaD 结构解读
I. Introduction(引言)
议题源流。“影子封禁”(shadow banning)指平台在不通知用户的情况下降低其可见度(Le Merrer, Morgan & Trédan 2021)。平台越来越倾向以“降权”而非“删除”处理擦边内容(Gillespie 2022;Zuckerberg 2018;Goldman 2021),使触达削减成为真实的治理杠杆,却极难从外部观测(Zeng & Kaye 2022;Gorwa, Binns & Katzenbach 2020)。排序不透明使用户借助“算法民间理论”推断平台行为(Eslami et al. 2015;Rader & Gray 2015),影子封禁信念即一种平台否认、用户又无法证伪的“算法民俗”(Savolainen 2022;Cotter 2023)。在 TikTok 上,这一信念与身份和政治紧密绑定,创作者据此调整发布策略以测试和规避疑似惩罚(Karizat et al. 2021;Duffy & Meisner 2023)。这些信念改变发布行为、驱动广告与平台政策,并进入国会听证与日益依赖独立审计的监管议程(Nicholas 2022;Metaxa et al. 2021)。
既往文献空白。从外部“证明”差异化可见性的各类比较,分歧最大的一轴恰是分析单元:①倡导报告没有独立单元——Network Contagion Research Institute(2023)以 60 个话题标签在 TikTok 与 Instagram 的平台终身发帖总量作比,无不确定性量化,也未调整平台年龄、地区可用性与受众结构,批评者以安慰剂标签而非统计回应;Radway & Edelson(2025)的以巴描述统计中亲巴方均值近五倍而中位数反低,是尾部驱动的合并比较特征。②同行评审研究在帖子层合并——Yarchi & Boxman-Shabtai(2025, Digital Journalism)以 318 条话题标签抽样视频做独立样本 t 检验与合并回归,未按账号聚类,而两方平均粉丝数相差一个数量级。③账号级设计——Le Merrer 等逐账号检验 250 万个 Twitter 账户;Jaidka, Mukerjee & Lelkes(2023)对约 25,000 个美国账号分层随机抽样,发现影子封禁罕见且集中于类机器人账号;Huszár et al.(2022)以随机留出组估计 Twitter 算法在 7 国中的 6 国放大右倾内容,但个体政治人物的党派与放大程度无显著关联。Hosseinmardi et al.(2021)则以账号级消费数据推翻了“YouTube 算法驱动激进化”的流行叙事。然而,尚无外部审计在同一语料上证明“单元选择本身即可制造或消解一次检测”。
本研究贡献。①构建一个高密度、分类器标注的 TikTok 小时级面板,在账号层给出带置信区间与功效分析、可量化的“无中到大程度触达压制”零结果;②识别数据中唯一稳健的信号——有利于反对方内容的互动不对称,把“被压制感”重构为受众强度问题;③在同一语料上定量追溯常规分析何以得出相反结论(伪重复 + 与立场对齐的混杂),并提炼可信可见性审计的最小规程。作者明确声明:不主张平台从不差异化分发内容,只主张在该设计可分辨的量级上,所指控的效应并不存在。
I. Theoretical Framework & Hypotheses(理论框架与假设)
论文未显式编号假设;以下按其论证结构整理为一条预设假设与四个研究问题。
| 编号 | 假设 / 问题 | 对应理论与文献 |
|---|---|---|
| H | 可见性因立场而异:争议议题中一方内容的按粉丝归一化触达系统性偏低 | 影子封禁话语;降权式可见性治理(Gillespie 2022;Zeng & Kaye 2022);Ibrahim et al.(2026)关于 2024 美国大选 TikTok 推荐偏向的研究 |
| RQ1 | 文献常规的合并分析是否“检测到”话题条件下的触达不对称 | 民间比较取证逻辑(Nicholas 2022;Delmonaco et al. 2024);帖子层合并设计(Yarchi & Boxman-Shabtai 2025) |
| RQ2 | 在独立抽样单元(账号)上该差异是否存在,零结果是否有信息量 | 伪重复(Hurlbert 1984;Lazic et al. 2018);设计效应与有效样本量(Kish 1965);功效分析与等价界 |
| RQ3 | 两种分析的分歧由何种机制造成 | 伪重复;与立场对齐的混杂(规模、年龄、语言);研究者自由度与规格曲线(Gelman & Loken 2016;Simonsohn, Simmons & Nelson 2020) |
| RQ4 | 可信的外部可见性审计需要满足哪些条件 | 算法审计范式(Sandvig et al. 2014;Metaxa et al. 2021)对照平台内随机实验(Guess et al. 2023;Huszár et al. 2022) |
三类测量风险与本文对策(论文第 2.3 节把它们作为设计的出发点):
| 风险 | 机制 | 本文对策 |
|---|---|---|
| 伪重复 | 把相关的重复测量当作独立重复,虚增显著性而不增加信息(Hurlbert 1984;Lazic 2010) | 以账号为推断单元;报告 ICC、设计效应与 Neff;在各单元运行构造零分布校准 |
| 研究者自由度 | 数据依赖的分析选择在无意中制造显著性(Gelman & Loken 2016;Simmons et al. 2011) | 预注册 3×3 分析网格并冻结;发现/确认双窗口;族内 BH-FDR;24 种规格的规格曲线 |
| 测量偏差 | 语种识别与 LLM 立场分类在非英语、全球南方内容上更不可靠(Blasi et al. 2022;Sap et al. 2019) | 分类器只作“是否在议题上”的门控;立场取自账号预设阵营;人工金标准验证;仅英语子集复核 |
测量构念说明。TikTok 主要经 For You 推荐分发,视频会被推给非粉丝,帖子触达与作者粉丝数只是松散相关,因此影子封禁在原理上可行,也因同样的不透明而难以从外部测量。作者以按粉丝归一化的播放量作为触达代理——这正是民间审计与创作者自己能观测到的量——但承认它混合了算法分发与受众行为,只有平台端日志才能把二者分开。
M. Materials & Methods(材料与方法)
- 数据采集:经第三方封装 TikAPI 调用 TikTok 公开 App 端点,直接轮询每条被追踪帖子的公开计数器(playCount、diggCount、commentCount、shareCount、collectCount)与账号粉丝数,而非抽样个性化 For You 流,故个性化不进入测量。窗口 2026-04-03 至 04-28,完成 604 轮小时扫描,602 个间隔中 598 个恰为 1 小时。面板共 556,946 条快照行、2,753 条视频、67 个账号,每视频观测数中位 99;累计计数在相邻小时间自然递增,每行是新测量而非前值结转。
- 账号抽样:数据收集前策展。每议题经谷歌搜索识别双方代表性声音,按公开表达立场分边,按预设粉丝档位(1–6 档,不足 10K 至超过 10M)分层选取,使双方在各层覆盖可比;粉丝约 2.5K–22M,涵盖政党组织、竞选团队、军方、新闻机构、评论员、独立创作者与一线记者。名册在采集前冻结,选择独立于结果。属分层便利样本而非概率样本,外部效度有限;67 个账号共 94 个“账号 × 议题”单元,其中 65 个账号至少发布 1 条被追踪视频。账号以去标识形式列出,不公开账号名。
- 结果变量:触达
ViewsPer1K = 1000 · playCount / followers;每次观看互动率 = 反应总数 / 播放量,并拆分为点赞、评论、分享、收藏;第三个预注册结果为 velocity(正文未给出其操作化定义)。 - “在议题上”的识别:三模型 LLM 集成(GPT-4o、Gemini、Claude Sonnet),温度 0,依次判断 relevance → topic → stance,多数投票;26 条无多数结论的议题内视频剔除。模型读原语言(含阿拉伯语),不经翻译。样本漏斗:2,753 条追踪视频 → 2,469 条可分类 → 940 条属三议题之一(173,050 条快照行,59 个发帖账号)→ 900 条严格纳入 → 754 条有清晰单视频立场;账号级触达集为属于预设正反方账号的 816 条议题内视频(57 个账号,构成 67 个“账号 × 议题”分析单元)。
- 分类器效度:模型间一致性 Krippendorff's α:topic 0.81、stance 0.78、relevance 0.56(故 relevance 只作粗筛)。作者手标金标准:分层随机 200 条(议题、阵营、语言均衡)+ 100 条三模型在 relevance 上分歧的难例。“议题内纳入”判断 Acc/F1/κ:分层集 0.88/0.88/0.85,难例集 0.80/0.80/0.77;relevance 0.91/0.91/0.88 与 0.82/0.82/0.79;4 类 topic 准确率 0.93(宏 F1 0.92),难例集 0.990(0.993)。作者据此认为低 α 反映的是单模型分歧,而多数票能正确裁决,并非有偏的议题过滤。
- 立场的确定:主分析立场取自账号的预设阵营而非单视频标签,把标题结论与分类器最大误差源隔离——分类误差只通过“哪些视频算议题内”进入主分析。作为对策展的检验,单视频立场与预设阵营一致率 93.1%(637/684);分议题 ICE 94.1%、以巴 95.8%、特朗普 90.3%;分语言英语 92.6%(n = 514)、阿拉伯语 93.4%(n = 137),未见常见的非英语可靠性落差,残差主要来自账号偶尔发布偏离其常规立场的内容。
- 推断单元与估计量:账号既是抽样单位也是阵营标注层级,故主估计量为账号级阵营差异,不主张识别账号内帖子级降权。每条视频取观测到的峰值触达,账号内取中位数,每账号一个值;效应量 Cliff's δ ∈ [−1, 1],配账号自助法 95% CI;主检验 Mann–Whitney U;首选 p 值来自随机化推断——在账号间置换阵营标签 B = 2×104 次,无需大样本假设。另拟合含粉丝与年龄控制的聚类稳健回归,但作者指出在该聚类数下聚类稳健标准误不可靠(Cameron & Miller 2015;Barr et al. 2013)。各议题分别分析;ICE 几近空集,只作报告,信息议题为特朗普与以巴。
- 预注册与多重检验:分析网格(3 议题 × 3 结果)、账号单元、估计量及发现(4 月 3–15 日)/确认(4 月 16–28 日)窗口在任何推断检验前冻结,偏离均记录在案。按结果族做 Benjamini–Hochberg 校正(三个结果回答触达、互动、速度三个不同问题);全网格 9 格的全局校正作敏感性分析。
- 构造零分布校准:在账号间随机重分配立场标签 3,000 次(构造上消除任何真实立场效应),记录各检验在 α = 0.05 下的拒绝率;在账号、视频、视频-小时三个单元分别运行,直接度量合并对假阳性率的膨胀。
- 伪重复诊断:对 log(ViewsPer1K) 做视频内方差分解求 ICC,按 Kish(1965)口径计算设计效应与有效样本量(即
Deff = 1 + (m̄ − 1)·ICC,N_eff = 行数 / Deff,m̄ 为每视频平均快照数;附录表 5 数值与此一致)。 - 帖子级调整模型:
log(peak plays)ᵢ = β₀ + β₁·Sideᵢ + β₂·log(followers)ᵢ + β₃·log(video age)ᵢ + εᵢ,标准误按账号聚类——帖子是观测、账号仍是推断单元,对应“降权作用于帖子层”的设定。因聚类稳健 Wald 检验在数十个聚类下偏激进,另以野生聚类自助法(Rademacher 权重、施加原假设、B = 9,999、固定种子)重算各阵营系数的 p 值。 - 其他稳健性:仅英语子集;仅保留发布后 24 h(48 h)内首次被观测的视频(针对年龄混杂);对以英语为主的 ICE 与特朗普按语言分层;由单元、结果度量、语言子集等选择组合出的 24 种可辩护规格的规格曲线;蒙特卡洛功效分析。
- 关于面板、固定效应与时间动态的取舍:论文没有采用固定效应等面板回归;小时级时间维度在主分析中被压缩为每条视频的峰值触达,再在账号内取中位数,从源头上消除快照间的自相关。时间动态经由四条途径处理:velocity 结果变量、帖子级模型中的 log(视频年龄) 控制、24/48 h 首次观测子集,以及预注册的发现/确认双窗口复现。
各议题账号级分析样本(附录表 2):
| 议题 | 阵营 | 账号 | 视频 | 粉丝中位数 |
|---|---|---|---|---|
| ICE | 支持 | 6 | 8 | 82K |
| ICE | 反对 | 5 | 13 | 274K |
| 特朗普 | 支持 | 17 | 143 | 224K |
| 特朗普 | 反对 | 14 | 246 | 326K |
| 以巴 | 亲以色列 | 13 | 101 | 75K |
| 以巴 | 亲巴勒斯坦 | 12 | 305 | 274K |
R. Results(结果)
- 常规合并分析“检测到”限流:合并小时快照做秩检验,以巴触达差距 p = 6.7×10−147,特朗普低于浮点精度;视频层已显著(特朗普 δ = 0.40,p = 4×10−10;以巴 δ = 0.24,p = 4×10−4),加入小时快照后显著性再增数十个数量级。按合并设计的惯例(大 N、极小 p、通过多重校正),这已构成一次“检测”。
- 账号级:触达差距消失:ICE δ = 0.07(p = 0.93)、特朗普 δ = 0.08(p = 0.71)、以巴 δ = 0.06(p = 0.81),BH 校正后 q ≈ 0.93,随机化推断一致,点估计 |δ| ≤ 0.08。
表 1 · 账号级主结果(na/nb 为支持方或亲以方 / 反对方或亲巴方账号数;δ 为负表示前者更低):
| 议题 | 结果 | na/nb | δ [95% CI] | pMW | qBH | pperm |
|---|---|---|---|---|---|---|
| ICE | 触达 | 6/5 | +0.07 [−0.67, 0.73] | 0.93 | 0.93 | 0.86 |
| 特朗普 | 触达 | 17/14 | +0.08 [−0.34, 0.49] | 0.71 | 0.93 | 0.75 |
| 以巴 | 触达 | 13/12 | +0.06 [−0.41, 0.51] | 0.81 | 0.93 | 0.91 |
| ICE | 互动/观看 | 6/5 | −0.13 [−0.80, 0.60] | 0.79 | 0.79 | 1.00 |
| 特朗普 | 互动/观看 | 17/14 | −0.51 [−0.82, −0.15] | 0.016 | 0.025 | 0.015 |
| 以巴 | 互动/观看 | 13/12 | −0.64 [−0.94, −0.26] | 0.007 | 0.021 | 0.002 |
| ICE | 速度 | 6/5 | +0.13 [−0.67, 0.80] | 0.79 | 0.79 | 0.81 |
| 特朗普 | 速度 | 17/14 | −0.23 [−0.62, 0.19] | 0.29 | 0.44 | 0.21 |
| 以巴 | 速度 | 13/12 | +0.42 [−0.01, 0.80] | 0.077 | 0.23 | 0.26 |
- 零结果有信息量:同一设计与样本量在互动率上检出清晰效应——建制方(挺特朗普、亲以色列)每次观看互动更低,经预注册校正后仍显著;在 6 个信息议题格上校正仍小于 0.05(q = 0.049、0.043),只有在最严格的 9 格全局 BH 下变为边缘(q = 0.073、0.064)。作者把它定位为次要的支持性结果,作用是证明设计能在此样本量下分辨该量级的效应。
- 功效与等价界:蒙特卡洛功效分析显示,在实际账号数下,真实效应 δ = 0.6 时功效 76%–89%,δ = 0.5 时 63%–70%(即所检出互动效应的量级)。账号自助区间把零结果转为等价陈述:95% 置信下可排除特朗普 |δ| > 0.49、以巴 |δ| > 0.51 的触达效应,更小的效应仍可能存在。
- 跨窗口复现(附录表 7):特朗普发现窗 δ = +0.22(p = 0.32,17/13)、确认窗 −0.04(p = 0.88,16/13);以巴发现窗 +0.17(p = 0.51,12/12)、确认窗 +0.09(p = 0.72,13/12),确认期未见真实效应应有的增强。
- 互动分项:反对方每次观看的点赞、分享、收藏更多,评论差异很小。特朗普:点赞 −0.47、分享 −0.44、收藏 −0.69、评论 −0.07;以巴:点赞 −0.67、分享 −0.54、收藏 −0.64、评论 −0.10。收藏在两个议题上差距都最大。
- 机制一:伪重复(附录表 5):视频内快照 ICC = 0.98,173,050 条议题内快照行仅相当于约 960 条独立视频(Deff ≈ 180),而这些视频又嵌套于立场有变异的数十个账号中(特朗普 31 个、以巴 25 个)。p 值随 √N 收缩而秩效应量不随之变化,单元膨胀把 p 推向零而 δ 基本不动——以巴在账号层 δ = 0.06、p = 0.81,到视频-小时层 p = 6.7×10−147,δ 始终不超过 0.24。
| 议题(视频内) | 视频 | 快照行 | ICC | Deff | Neff |
|---|---|---|---|---|---|
| 全部议题内 | 940 | 173,050 | 0.98 | 180 | 963 |
| ICE | 32 | 11,159 | 0.97 | 339 | 33 |
| 特朗普 | 458 | 71,717 | 0.97 | 152 | 471 |
| 以巴 | 450 | 90,174 | 0.98 | 196 | 460 |
- 构造零分布:随机重分配立场后,账号级检验拒绝率接近名义水平(合并各议题 4%,分议题 3%–6%),合并的视频-小时检验拒绝率却高达 95%——真实效应为零时,合并程序几乎每次都报显著,所谓检测完全是被“制造”出来的。
- 机制二:与立场对齐的混杂:①规模——触达对粉丝数呈次线性(log playCount 对 log followers 的斜率特朗普 0.73、以巴近零,均小于 1),按粉丝归一化会过度惩罚大号,而亲巴方粉丝中位数是亲以方的 3.6 倍;②年龄——亲以视频进入面板时中位已发布 128 小时,亲巴不到 1 小时,两方处在播放累积曲线的不同位置;③语言——亲巴账号多发阿拉伯语、亲以几乎没有,而采集默认美国地区,立场与内容语言、受众地理近乎共线(公开计数是全球总量,故这是内容与受众构成的混杂,而非测量混杂)。仅英语子集:账号级触达 δ = −0.21,p = 0.42;互动率 δ = −0.76(全部视频为 −0.64),差距反而略增,说明互动差异不是语言伪影。
表 8 · 帖子级调整模型(因变量 log(peak plays),控制 log 粉丝与 log 视频年龄,按账号聚类):
| 议题 | 阵营编码 | 系数 | 聚类 SE | 95% CI | p | 野生 p | 视频 | 聚类 |
|---|---|---|---|---|---|---|---|---|
| ICE | 支持 − 反对 | 0.34 | 0.86 | [−1.49, 2.16] | 0.70 | 0.69 | 28 | 16 |
| 特朗普 | 支持 − 反对 | 0.84 | 0.47 | [−0.10, 1.79] | 0.07 | 0.22 | 355 | 37 |
| 以巴 | 亲以 − 亲巴 | 0.45 | 0.61 | [−0.79, 1.69] | 0.46 | 0.56 | 371 | 32 |
- 控制规模与年龄后三议题均无显著阵营差异;唯一边缘的特朗普格,方向若有也是偏向建制方而非不利于反对方,经野生聚类自助后 p 由 0.07 升至 0.22。帖子级调整分析与账号级检验结论一致。
- 定向子集:只保留发布后 24 h 内首次被观测的视频,触达依然为零(特朗普 δ = −0.27,p = 0.29;以巴 δ = 0.13,p = 0.71;ICE δ = 0.20,p = 0.79),48 h 口径结论相同;账号-议题单元所依托的视频数中位 5 条(范围 1–164),ICE 尤其稀薄。
- 规格曲线:24 种可辩护规格中 19 种“显著”、符号不一,但显著性几乎完全由单元决定——账号级规格 50% 显著,视频-小时级 100% 显著;固定账号单元后,触达问题一致为零,互动问题一致为正。
a / D. Discussion & Conclusion(讨论与结论)
- 核心结论:在立场被定义的单元(账号)上分析,并处理规模与语言混杂后,三个争议议题上没有中到大程度差异化触达压制的证据;唯一稳健的不对称是反对方内容获得更高的受众互动,而触达不变。在该语料中,被读作影子封禁的现象更宜解释为更投入的受众,而非被压制的受众。
- 方法论意义:单元优先:同一数据上 p 值相差一百多个数量级,仅由单元选择决定。附录 F 坦言各步骤本身并不新颖(聚类数据与研究者自由度文献早有),可见性审计特有的是操作顺序:必须先固定单元——影响最大且最不可见的选择——并把设计效应与 p 值并列报告。只拿到 N 和 p 的读者无法分辨高密度审计与被合并膨胀的稀疏审计,而影子封禁话语恰恰依赖这种混淆。
- 对平台审计方法论的五步规程:①在独立单元上分析真实观测,合并检验前先报告 Deff 与有效 N;②明确抽样独立单元——账号策展的阵营比较即账号,若假设处理作用于帖子层,用分层或聚类感知模型,不把重复帖子或快照当独立样本;③在归因于立场前去除账号规模、视频年龄、内容语言与地区混杂;④预注册分析网格并公布规格曲线,而非单一有利格;⑤报告功效、以有界陈述表达结论,因果主张留给平台内随机实验。
- “无过错的夸大”:分析者因“数据越密越好”收集小时快照、因“行越多越好”合并、再报告显著的比较,全程没有一步像 p-hacking,却得到被放大两个数量级的结果。记者与倡导机构(NCRI 2023;Radway & Edelson 2025;Harwell 2023)运行的是同类观察性比较,激励又偏向显著结果;这种“做出显著结果容易、做出可辩护结果昂贵”的努力不对称,会误导国会听证、广告投放与监管议程。
- 受众动员而非压制:收藏与分享这类最费力的反应差距最大,评论几乎无差,与“被计数的互动 ≠ 流通”的既有论述一致(Gerlitz & Helmond 2013;Cotter 2019)。作者强调该效应是相关性的,可能反映“谁在关注这些账号”而非平台如何对待它们;更高互动本身也不能排除压制(平台理论上可能降权引发强烈反应的内容)。更一般的教训是:触达只是帖子接收情况的单一噪声指标,测量完整互动剖面的审计能在触达比较给出伪信号之处找到真实信号。
- 与既有研究对话:Yarchi & Boxman-Shabtai(2025)在视频层合并比较中报告亲巴内容互动更高——到账号层,这一互动不对称经受住了单元校正,而话语据此推断的触达压制没有。Huszár et al.(2022)以随机留出组发现 Twitter 存在真实但有界的党派放大,本文账号级审计在 TikTok 触达上未见此类效应,二者都在账号层估计,对照富有启发;Hosseinmardi et al.(2021)的 YouTube 案例同样是账号级审慎推翻了放大叙事。
- 不等于平台中立:零结果是“在设计可分辨量级上证据的缺失”,而非平台中立的证明。最干净的检验是 2020 年 Facebook/Instagram 研究那样对自愿用户随机化排序干预(Guess et al. 2023;Nyhan et al. 2023;González-Bailón et al. 2023)。作者由此主张结构化数据访问:固定账号规模、语言、地区的抽样框,最好配合平台端随机化或曝光日志;在此之前,分析者须报告设计效应、有效样本量与完整规格网格,外部观察性审计应被读作效应大小的校准上界,而非对平台意图的裁决。
- 局限:观察性、单平台、策展账号,只刻画所追踪账号而非 TikTok 整体;每议题账号数仅数十,只能为小于设计分辨力的效应给出上界;按粉丝归一化的播放量是分发的代理,无法分离算法降权与受众行为;语言分析依赖不完美的平台语言标签;立场在账号层赋值,忽略账号内跨帖子差异;金标准由作者自标,限制了校验力度;ICE 过于稀疏,仅作完整性报告。作者强调:这些局限都不能靠增加更多自相关的行来弥补。
- 伦理与可复现:仅用公开计数,未与用户互动、未改变任何信息流;结果只在阵营与议题层汇总,发布件中账号均为哈希去标识,从不把具名账号与立场或压制主张相连;按作者所在机构对公开、非互动数据的标准无需 IRB 审查。所有数字源自单一统计文件,作者承诺发布预注册、去标识分析代码、作图脚本与派生统计。原文未列资助信息。
🧠 IRMaD 思维导图
mindmap
root((TikTok限流审计))
I 引言
限流指控影响创作与监管
平台不公开排序规则
民间靠比较播放量取证
既往审计多为合并比较
分析单元从未被固定
账号级重析曾推翻旧说
R 问题
平台是否压制某一立场
三议题正反两方对照
合并分析为何说有
零结果是否有信息量
可信审计需要什么
M 方法
67账号 2753视频
55万余条小时快照
三模型集成识别议题
立场取自账号阵营
峰值再取账号中位数
置换检验与自助区间
预注册与构造零分布
野生聚类自助回归
R 结果
合并检验p值小到极点
账号级触达差异近零
可排除中到大效应
反对方单次观看互动多
收藏差距最大评论几无
设计效应约180
构造零下误报率95%
规模年龄语言三重混杂
a 讨论
p值随N缩小效应量不变
调整回归亦无差异
24种规格显著随单元变
更投入的受众而非压制
观测审计只给出上界
不等于平台中立
D 结论
未见中到大程度限流
先固定独立单元
报告设计效应与有效N
去混杂后再归因立场
预注册并公布规格曲线
因果需平台内随机实验
图:本研究的 IRMaD 思维导图。蓝色 I 引言;橙色 R 研究问题;绿色 M 方法; 橙色 R 结果;紫色 a 讨论;红色 D 结论。