Journal of Ethics and Legal Technologies, Vol. 7(2), November 2025(同行评审法学刊物,非 SSCI);作者为塞浦路斯 Neapolis University Pafos 公法与国际/欧盟经济法学者,隶属 Jean Monnet 卓越中心 AI-2-TRACE-CRIME,受欧盟资助。

算法行政与欧盟《人工智能法案》:公共部门使用AI的法律原则

Ioannis Kastanas, Georgios Pavlidis · Journal of Ethics and Legal Technologies · 2025 · arXiv: 2604.22765
原题:Algorithmic Administration and the EU AI Act: Legal Principles for Public Sector Use of AI
Open Access 新颖度 0.60

🧒 初中生也能看懂的版本

① 研究背景(为什么要做?)

想象一下,你去申请一笔育儿补贴,系统给你打了一个“高风险”分数,补贴就被卡住了。你问为什么,工作人员说“系统算的”。这不是科幻:荷兰的托儿补贴丑闻里,风险评分算法把成千上万个家庭误标成骗子,很多人被迫还钱、家庭破裂。
欧盟为此通过了《人工智能法案》,把AI按风险分成不同等级,高风险系统要接受更严的检查。听起来很合理。但作者提醒:这套办法是围绕“系统”设计的,而公共部门真正伤人的地方,往往发生在“这个系统被用在哪件事、对谁、由谁拍板”这些情境里。

② 研究问题(要回答什么?)

行政法有几条老规矩:政府做决定必须依法、必须说明理由、必须给当事人申辩和救济的机会,处罚还要符合比例——不能杀鸡用牛刀。AI进入政务以后,这些规矩还管用吗?
作者要回答的是:欧盟《人工智能法案》的系统级风险分类,和行政法上的裁量、说明理由义务、比例原则,到底是对齐的,还是各说各话?如果错位,错在哪里,能不能靠解释和制度补丁修好?文章重点看福利、移民、教育、执法这四个最容易伤人的公共场景。

③ 研究方法(怎么做的?)

这是一篇法学论文,做法不是跑数据,而是“条文对原则”的逐条比对:先把法案对公共部门“部署者”的义务拆开——风险评估、透明度、人工监督、上市后监测;再把行政法的三项核心原则拆开——裁量空间、说明理由、比例原则。
然后拿真实制度和案例做压力测试:荷兰托儿补贴案、庇护程序里的决策辅助工具、福利资格评分。作者还比较了法案第6条的高风险清单、第14条的人工监督、第50条的“告知你在和AI打交道”,看它们在具体行政程序里够不够用。

④ 结果(发现了什么?)

作者找到三处明显错位。第一,裁量被悄悄搬家:哪些变量重要、怎么加权、不确定性怎么处理,这些选择藏在模型里,实际决定权从公务员转到了开发商手里,而开发商既不受行政法约束,也没有民主问责。
第二,人工监督容易变成盖章:法案要求“有意义的人工监督”,但没说什么算有意义;在批量处理福利申请时,官员根本看不过来,还会因为“系统更权威”而顺着系统走,这叫自动化偏差。
第三,比例原则对不上:法案按系统类型定风险,可同一个系统在图书馆办证和在移民遣返里,后果天差地别;反过来,没被列入高风险清单的工具,用在敏感场景也可能造成大伤害,法案却不自动加码。

⑤ 讨论(这些发现说明什么?)

作者的判断是:法案的方向没错,但它把“风险”理解成系统属性,而行政法关心的是“这一次公权力行使是否适当”。两者不是一回事。
更麻烦的是救济。个人要挑战一个算法决定,首先得知道用了算法,其次要看得懂理由,最后还要有地方申诉。法案第50条只要求“告知你在和AI交互”,并没有给出一份真正的理由说明;欧盟基本权利宪章第47条虽然保障有效救济,但在模型不透明、供应商保密的情况下,个人很难真正用起来。

⑥ 结论(最终结论 + 启示)

文章最后给出五条建议:把“有意义的人工监督”写成可操作的指引;用国内立法给个人可执行的说理权和救济权;让人权影响评估引入利益相关方、外部审查并公开结果;让比例原则同时约束义务的设计和执行;以及投资监管机构的技术、法律和制度能力。
一句话总结:管住算法不难,难的是让公权力在借助算法行使时,仍然站在法律之下。

🎓 专业 IRMaD 结构解读

I. Introduction(引言)

公共部门采用AI已从试点走向常态:福利资格判定、税务稽查、移民与庇护、预测性警务、教育资源配置。文献一方面记录效率收益,另一方面记录了荷兰托儿补贴丑闻(Toeslagenaffaire)这类制度性失败——风险评分把大量家庭误判为欺诈,说明算法会放大既有的行政偏差。欧盟《人工智能法案》以风险分级回应这一挑战,对高风险系统的提供者与部署者设定了风险评估、技术文档、透明度、人工监督与上市后监测等义务。
本文的切入点不是“AI 是否合法”,而是法案的义务结构与行政法教义是否同构。作者指出,法案以系统为分析单位,行政法以具体行政决定为分析单位;前者问“这个系统风险多高”,后者问“这次公权力行使是否合法、必要、适度”。文章据此检验三项原则——行政裁量、说明理由义务、比例原则——在算法行政下是否仍可执行,并提出解释与制度层面的补救。

I. Theoretical Framework & Hypotheses(理论框架与假设)

文章不设假设检验,而以三组概念对照构成分析框架:

行政法原则规范要求算法行政下的张力法案对应条款
行政裁量个案衡量、情境适配、可问责的判断空间“设计裁量”转移给开发者;评分被呈现为客观结果,压缩个案判断Art. 6 / Annex III 风险分类;Art. 14 人工监督
说明理由义务决定须载明事实与法律依据,使当事人可理解、可争辩模型不透明、商业秘密;告知“与AI交互”不等于说明决定理由Art. 50 透明度;Art. 13 提供者信息义务
比例原则适当、必要、均衡;手段与目的相称系统级风险与个案情境错位;低风险工具可用于高后果场景Art. 6(3) 情境例外;Art. 27 基本权利影响评估

核心命题是:法案的“风险”是系统属性,行政法的“比例”是关系性判断;当二者错位时,合规可能沦为形式,而权利保护出现真空。文章进一步用“自动化偏差”(automation bias)与“选择性遵从”(selective adherence)解释人工监督为何在资源紧张时退化为盖章。

M. Materials & Methods(材料与方法)

R. Results(结果)

a / D. Discussion & Conclusion(讨论与结论)

🧠 IRMaD 思维导图

I 引言 R 研究问题/假设 M 方法 R 结果 a 讨论 D 结论
mindmap
  root((算法行政与AI法案))
    I 引言
      政务AI快速铺开
      荷兰补贴丑闻
      法案按风险分级
      行政法原则受冲击
    R 框架
      裁量说理比例三原则
      系统风险对个案情境
      设计裁量发生位移
      自动化偏差
    M 方法
      规范教义学分析
      逐条对照法案条文
      福利移民教育执法
      案例压力测试
    R 结果
      裁量转到开发者
      高风险清单不对称
      人工监督易走过场
      告知不等于说理
      救济缺少程序载体
      比例可能过重过轻
    a 讨论
      系统风险不等于个案
      合规可能沦为形式
      人权评估需外部审查
      成员国实施差异大
    D 结论
      监督指引要可操作
      立法给说理与申诉
      评估结果应公开
      监管能力须补课

图:本研究的 IRMaD 思维导图。蓝色 I 引言;橙色 R 研究问题;绿色 M 方法; 橙色 R 结果;紫色 a 讨论;红色 D 结论。