arXiv 2025 · cs.MA/cs.SI · LLM-ABM

用网络化生成式智能体群体模拟话题标签动力学

Abha Jha, J. Hunter Priniski, Carolyn Steinle 等 4 人 · arXiv · 2025 · arXiv: 2510.26832
原题:Simulating hashtag dynamics with networked groups of generative agents
Open Access 新颖度 0.75

🧒 初中生也能看懂的版本

① 研究背景(为什么要做?)

你在微博或推特上一定见过话题标签。一条新闻出来,大家很快都用上同一个标签,好像事先约好了一样。可为什么会这样?有些人多的群体会慢慢统一说法,有些群体却各说各的,谁也说服不了谁。这不只是语言习惯的小问题,它关系到一件大事:一群人隔着网络互相看对方说什么,究竟能不能形成共同的理解。

过去研究这个问题有两条路。一条是做真人实验,把人请进实验室,让他们按网络图互相配对玩游戏。这条路很真实,但花钱多、规模小,换个情境就得重做一遍。另一条路是写电脑程序来模拟人,可老式程序只会按固定规则加减数字,根本读不懂新闻里讲了什么。现在有了大语言模型,它读过海量文字,能像人一样写句子、想标签。于是研究者冒出一个念头:能不能让一群大语言模型扮演网民,放进社交网络里互相聊天,看看它们会不会像真人一样,聊着聊着就聊到一块儿去?

② 研究问题(要回答什么?)

这篇论文想弄清楚三件事。

第一,一群由大语言模型扮演的网民,在网络里反复互动之后,能不能像真人那样形成共同的话题标签?研究者把这种「大家说的话越来越集中」的现象叫作群体一致性。真人身上这件事是被反复验证过的,模型身上会不会也发生,是个问号。

第二,不同的模型表现一样吗?作者挑了四个当时很先进的大语言模型,让它们在同样的网络、同样的规则、同样的新闻下各跑一遍,看谁更接近真人。这四个模型出身不同:有的专门练过一步步推理,有的读过中英双语,有的经过人类反馈调教。

第三,模拟出来的东西,和真实世界对得上吗?所以作者设了两道考题。第一道拿真人做过的实验当标准答案,看模型能不能复现;第二道拿真实推特上的标签当标准答案,看模型说的话像不像真人说的话。

换句话说,这篇论文不是在问模型聪不聪明,而是在问:把它当成研究社会的工具,到底靠不靠谱。

③ 研究方法(怎么做的?)

作者把真人玩过的一个游戏搬进了电脑。规则很简单:每个人先读一段新闻,比如二零一一年日本福岛核事故的来龙去脉;然后大家两两配对,各自想一个不超过五个词的话题标签。如果和搭档想的一样,就得一分;不一样,就是零分。这样玩四十轮,看大家会不会慢慢想到一块儿去。

配对不是乱配的,而是按照一张网络图来配。这张图有点像小镇的街道:街坊邻居之间连得很密,形成一个个小圈子,但总有几条路能通到很远的地方。研究者说,真实社交网络大概也是这个样子。每一轮,每个人都会被分到一个新搭档,然后看到搭档上一轮写了什么。

真人版实验由另一批研究者做过,留下了完整的真实答案。现在作者让四个大语言模型分别扮演一整个网络的居民:替他们读新闻、想标签,还把邻居上一轮的答案塞进提示词里,让它们参考着写。为了给结果打分,作者算了三样东西:大家写的标签有多集中;标签和新闻里的因果事件有多接近;以及模型说的话,和真人说的话在用词上有多像。

④ 结果(发现了什么?)

结果一半让人放心,一半让人担心。先说福岛这道题。真人群体的标签确实越来越集中,越聊越像。四个模型里,Gemma 和 Qwen 也出现了类似的下降,只是速度更慢,算是部分学会了看邻居脸色。但 LLaMA 的集中度几乎是一条平线,DeepSeek 反而越聊越散,说明它被邻居的信息带偏了。

更麻烦的是标签的内容。模型写的几乎都是话题本身,比如「福岛核事故」,而真人还会写「地震」「灾民搬迁」这种讲因果的标签。Qwen 甚至把两件不同的事拼成一个长标签,反而更难对上。作者还画了排行榜曲线,看每个模型最常用的十个标签,发现这个毛病是四个模型共有的。

再说菲律宾大选这道题。同一轮里说同一个标签的人,只有一成到一半,远不如福岛那组整齐。四个模型的混乱程度都在三左右,明显更高。有意思的是,模型的标签老是围着提示词里第一个出现的候选人转,出现了明显的「先来后到」偏差。

⑤ 讨论(这些发现说明什么?)

作者怎么解释这些现象?他们认为,模型并不是不会说话,而是不会像人那样把新闻里的前因后果串起来。人读福岛新闻,会记住这样一条链:地震引起海啸,海啸毁掉电站,电站泄漏迫使居民撤离。所以写标签时,人会从链条上挑不同的环节。模型更像是在做关键词联想,抓住最显眼的名词就完事。

到了菲律宾大选这种政治话题,情况更复杂。模型对候选人没有稳定态度,只能抓住排在最前面的名字,于是大家都写同一个人。看上去挺一致,其实是同一种偷懒。作者提醒,如果拿这种模拟去研究舆论,很可能把「顺序偏差」误读成「民意集中」。

还有一个反差很有意思。福岛那组,模型说的话越来越不像真人;大选那组反而越来越像。作者猜测,这是因为推特上的政治话术本来就在模型的训练语料里,模型早就熟悉这套腔调。换句话说,模型在它「见过世面」的话题上更像人,在需要动脑子推理的话题上反而露怯。

⑥ 结论(最终结论 + 启示)

所以这篇论文的结论是:大语言模型可以当成研究群体传播的实验室,但暂时还不能单独当答案。它们能部分复现真人形成共识的过程,可一旦遇到需要因果推理、需要政治立场的情境,就会露出破绽。

作者给出的建议很实在。第一,用模型做社会模拟之前,必须拿真人数据做校准,看看它到底偏在哪里。第二,提示词要写得更细,比如打乱候选人顺序、明确要求写出因果环节,而不是丢一段新闻让它自由发挥。第三,评估不能只看「最后有没有一致」,还要看一致是怎么来的。

对研究传播的人来说,这意味着模型是一台能快速试很多种网络和情境的模拟器,但模拟器本身要先校准。对普通人来说,这也解释了一件事:网上看似整齐划一的声音,未必是大家真想通了,也可能只是谁先开口,大家就跟着谁。

🎓 专业 IRMaD 结构解读

I. Introduction(引言)

网络化环境中的叙事互动如何塑造个体与群体信念,是计算传播学的核心议题。既有研究沿两条线索推进:其一,以协调博弈为载体的受控实验——Centola 与 Baronchelli(2015)的 Name Game 证明网络拓扑(全连接 vs. 环形)决定共享约定的涌现,Priniski 等(2024)将其扩展为 Hashtag Game,要求被试整合背景因果知识与邻居输出以生成一致标签;其二,以 LLM 作为个体与群体行为模型,如 Chuang 等(2024)的 LLM 网络意见动力学、Chang 等(2024)关于 LLM 生成社会网络结构的研究。

空白在于:LLM 群体涌现现象的量级与稳健性仍不确定,多数工作缺少与真人数据的双向基准,也少有人同时检验「收敛轨迹」「叙事忠实度」「语言分布」三个层面。本文提出一个 LLM-ABM 框架,以四个异质 SOTA 模型、两套经验基准(受控人类实验 + 推特自然标签)与三类连贯性指标,系统检验生成式智能体在 hashtag 动力学上的效度,并把结论直接落在信念形成、共识/极化与网络化传播的机制问题上。

I. Theoretical Framework & Hypotheses(理论框架与假设)

编号研究问题 / 预期对应理论
RQ1LLM 智能体网络能否复现真人群体熵随互动轮次单调下降的收敛轨迹文化演化与协调博弈;社会学习
RQ2训练目标与架构不同的模型,在收敛速度与稳健性上是否存在系统差异分布式认知;预训练分布假说
RQ3标签是否对齐叙事的因果结构,而非仅对齐主题实体叙事的因果心智模型
RQ4在政治敏感叙事中,社会奖励能否仍驱动共识而非极化信念形成与极性化;首因/显著性偏差

操作化预设:连贯性=群体标签分布的熵下降;语言效度=相对人类单字分布的困惑度;叙事忠实度=标签嵌入与因果事件嵌入的余弦匹配。三者共同构成「像人」的多维判据,而非单一收敛结果。该框架把共识与极化操作化为可观测的分布统计量,使「网络结构—互动规则—群体输出」三层机制能在同一仿真中被拆开检验。

M. Materials & Methods(材料与方法)

R. Results(结果)

模型Study 1 熵趋势叙事对齐Study 2 众数占比 / 熵Study 2 困惑度
DeepSeek-R1上升(恶化)仅主题级初期高、后降;熵≈3改善较弱
LLaMA-3.1-8B近似持平仅主题级10–50%;熵≈3改善最稳定之一
Qwen2-7B缓降(中度)主题级,长串合并致匹配下降10–50%;熵≈3改善较弱
Gemma 2缓降(中度)仅主题级10–50%;熵≈3改善最稳定之一

a / D. Discussion & Conclusion(讨论与结论)

🧠 IRMaD 思维导图

I 引言 R 研究问题/假设 M 方法 R 结果 a 讨论 D 结论
mindmap
  root((网络标签如何收敛))
    I 引言
      网络塑造信念
      标签游戏范式
      模型能否替代真人
    R 问题
      能否形成共识
      四模型差异
      两套真实基准
    M 方法
      小世界网络
      四十轮配对
      四个大模型
      社会奖励一分
      熵与困惑度
      叙事对齐嵌入
    R 结果
      真人熵稳定下降
      Gemma 缓降
      Qwen 缓降
      LLaMA 持平
      DeepSeek 熵上升
      大选仅一到五成
      首个候选人偏置
    a 讨论
      只抓话题不抓因果
      政治语境更复杂
      推论语料更贴近
    D 结论
      需真人数据校准
      提示需结构化
      模拟不能替代真人

图:本研究的 IRMaD 思维导图。蓝色 I 引言;橙色 R 研究问题;绿色 M 方法; 橙色 R 结果;紫色 a 讨论;红色 D 结论。