
1983 年生于 埃塞俄比亚 的 Timnit Gebru,其研究路径与 大语言模型的偏见审计与数据治理 的主流路径几乎不重合。她用一篇八千字的论文让整个行业意识到,自己训练的数据里藏着什么——代价是被解雇,而这份代价后来变成了一整套新的行业规则。
一、问题一:模型该不该被问”你是怎么被造出来的”
埃塞俄比亚亚的斯亚贝巴,1983 年。这个坐标决定了 Timnit Gebru 早年接触到的数学与工程语汇——父亲是位 traveled 流行病学家,母亲是公共卫生统计学者兼大学教师;她在埃塞俄比亚完成小学与中学教育,十四岁随家人迁往美国,二十四岁取得普林斯顿大学物理学与数学双学位
Gebru 的家庭背景几乎就是一份公共卫生学教科书:父亲长期从事跨国的流行病学田野工作,母亲则是非洲裔美国人在美国大学从事公共卫生统计教学的先驱之一。她后来反复用「统计」这个视角看待 AI——问题不在模型多聪明,而在用来统计和决策的数据从哪里来。
十四岁那年她随家人迁往美国。这段跨越两种制度、两种发展水平的经历,让她成为英语世界和全球南方之间的观察者:她既熟悉美国顶级研究机构内部的运作逻辑,也清楚这些机构所用的数据覆盖了谁、遗漏了谁。
她在普林斯顿主修物理学并辅修数学,辅修期间她修了大量关于「系统性问题如何从统计过程本身产生」的课程。后来她对模型偏差的整套论证,本质上就是把这种系统性思维搬到了机器学习上。
她最早的学术转向并不是机器学习,而是强化学习与「如何让模型从人类反馈中学习」这一方向。她在论文中署名早期的强化学习工作,这个技术背景让她后来在讨论大模型对齐问题时使用的是工程语言,而不是宣言式的语言。
二、埃塞俄比亚的数学童年与两个移民国家的重量
2013 年的 先后在微软研究院从事计算机视觉、在谷歌 Brain 团队参与大规模机器学习系统的数据与模型工作 是 Timnit Gebru 的分水岭。她所在的位置离「训练语料从哪来、谁被写进语料、谁被排除在语料之外」这些问题最近,因为大规模视觉与语言模型的每一版性能提升都要重新洗一遍数据,这一点后来被整个 大语言模型的偏见审计与数据治理 领域反复引用,而 这段经历让她在 2020 年提出那篇论文时,拥有了别人难以获得的第一手观察:偏差不是在某个环节被引入的,而是在数据规模的每一次扩张中持续再生。
她在微软研究院做视觉方向的工作时,正处在 ImageNet 之后的那波大规模数据集驱动研究热潮中。她后来反复讲过一个观察:数据团队的工作方式,是把它当成一次性的工程问题——收集、标注、清洗、投入训练——而没有人对「这套数据代表谁、不代表谁」负有最终责任。
在谷歌 Brain 期间,她参与过大模型的训练与评测工作,也做过面向少数语言与低资源语言的语音识别研究。这段工作让她直观看到数据覆盖的不平等:一个语言如果有足够多的语料,模型的表现会高一个量级;而没有语料的语言,在产品上就直接等于不存在。
她推动过在模型卡与数据集卡中记录数据来源与已知偏差的实践。这些做法当时被视为额外开销,后来成为模型发布流程的常规部分。
她也是少数几位公开谈论「技术移民」身份如何同时带来结构性优势与结构性盲区的研究者——既拥有进入顶级实验室的路径,也看到了这条路径对没有同样通道的人意味着什么。
三、微软与谷歌:她进入的不是研究前沿,而是数据管线
这里有一个不能略过的争议:研究管理层认为这篇论文的核心主张站不住,认为把结构性偏差归咎于数据规模与模型参数的方式过于笼统,且认为这一结论尚未经过充分验证。Timnit Gebru 后来在多个场合解释过为什么 她的判断是:既然大模型的下一阶段完全押注在继续扩大数据与参数上,那么「数据里有什么」就不是可以推迟到以后再回答的问题——现在不回答,模型就会被部署在没人理解其缺陷的状态下,并为 论文未能按原样发表,研究团队被要求撤回该项工作,她被解除职务并失去了进入谷歌研究院工作的通道 付出了具体代价。
那篇论文题为《随机鹦鹉与语言模型的规模风险》,英文原名是 Stochastic Parrots。副标题直接点明了论证方式:大型语言模型是随机鹦鹉——它们根据统计规律把学到的内容重新组合输出,而不具备任何意义上的理解与意图。
论文的结构非常完整:它先讲清楚大语言模型的工作原理与训练数据的来源特征,再分别讨论偏见与毒化、能耗与碳排放、复制与再现能力上的差别、训练数据中的权利与同意问题,最后讨论模型带来的规模集中化趋势以及大型实验室在评估上的不透明。
论文中有一组被广泛引用的估算:训练一个大型语言模型的碳排放量与一部电影的生产能耗处于同一量级,而主流模型所依赖的通用网页语料,其本身也被认为含有大量带有毒性的内容。
论文发表前先经过了谷歌的内部研究评审流程。据她本人在 2021 年公开的说明,她在论文被提交的同一时期还撰写了一份面向公司内部的备忘录,论证公司的多语言包容性目标与实际的数据实践之间存在张力。这份备忘录没有被采用。
论文最终没有被谷歌的内部研究渠道发表,作者与一批共同署名的研究者选择把它作为预印本公开,并同时公开了内部备忘录的全文以及与研究管理层的往来邮件。这个「论文加备忘录加邮件」三件套的发布方式,本身成为了后续多起类似事件的模板。
四、2020 年 12 月:那篇论文和那份内部备忘录
从 谷歌 Brain 团队的数据与模型研究岗位 到 DAIR 数字公平研究所与 Cohere for AI(2021 年),Timnit Gebru 完成了一次关键的问题重定义。如何在一家以扩大模型能力为主要目标的组织内部,推动关于数据与偏差的研究议程 属于 DAIR 数字公平研究所与 Cohere for AI之前的世界;DAIR 数字公平研究所与 Cohere for AI 要回答的是 如何在一个不依附于任何单一公司的结构里,建立一个能长期做这类审计并公开发布结论的平台。
她与机器学习研究者 Eloundou 与.solomon 共同创立了 DAIR(数字公平研究所),定位是一个独立的研究机构,专门对 AI 系统做公平性影响评估。它的产出方式是发起公开的社区参与式研究,比如让大规模标注者和公众共同参与数据集的偏差标注。
她参与发起了 Cohere for AI,这是一个汇集多家 AI 企业、研究者与公民社会组织的合作平台,宗旨是提出一套可操作的 AI 责任准则。它发布的多方责任框架被不少机构引用。
她与合著者共同推动了大模型影响评估的方法论,核心思路是:不能只对模型输出做抽样审计,而要向前追溯到训练数据的构成、标注流程和标注者的劳动条件。
她的机构后来联合其他组织发起了对大型语言模型数据集中「标注者」处境的系统性研究,揭示出这些被用来标注海量训练数据的人往往来自全球收入最低的地区,报酬被压到极低,且需要对工作内容本身做心理创伤的自我审查。
2023 年,她组织发起了「非洲的人工智能」相关议程工作,把非洲语言与数据主权的问题推到国际政策讨论的前台,这是长期被技术议程忽略的方向。
五、2021 年之后的独立机构:她从「在体制内发声」变成「在体制外建制」
2022 年前后,学界的主流判断仍偏保守。在她被解除职务之后,主流观点倾向于认为这件事会以「个人与公司的理念不合」收场,行业规则不会因此改变,但 Timnit Gebru 选择 她坚持认为,模型的影响评估不能是发布之后才补的一份文档,而必须是训练之前的强制环节——这与行业把「安全」理解为发布后测试的惯性直接冲突,代价是 在此后的几年里,大模型领域真正形成了外部审计机制、模型影响评估流程与数据来源披露要求的推动,主要来自多国监管机构与研究机构,而不是来自单个公司的自觉。
她离开谷歌之后,数月内便有另外几位人工智能研究员以类似方式离开岗位,这在行业里被称为「Gebru 时刻」。这一系列离职把原本零散的技术伦理讨论,推成了公开的、可被媒体追踪的组织事件。
在她的论文发表后不到半年,多国监管机构启动了针对大语言模型的专门评估程序。她本人在多个场合指出,这些评估多半是论文发表这一事件的直接结果,而评估的触发点在外部,而非内部。
她持续批评大模型开发在几个方向上的具体问题:训练数据来源不透明、数据标注劳动被隐藏在下游供应链中、模型评测集中于英语与少数高资源语言、以及超大模型的能耗成本被排除在商业决策之外。
她对「AI 治理」这个概念的界定值得一提:她认为治理的关键不是设立伦理委员会,而是改变激励结构——如果一家公司的商业模型建立在抽取他人未被同意的数据之上,那么任何评审机制都无法真正约束它。
她关于模型能力扩张与商业收益高度集中于少数公司的结构性论述,在后续关于算力成本、开放权重与反垄断的公共讨论中反复被引用,成为「规模化是否为唯一路径」这一讨论的重要坐标。
六、她真正推动的东西:让「数据」从一个技术名词变成一个问责对象
2021 年的 ACM 国际学习算法与发现会议 Distinguished Paper 与多项研究影响力奖项 之后,Timnit Gebru 把主要精力投到 把数据文档化从单个公司的内部流程,推成一套跨机构可比较、可审计的行业标准,并推动面向全球南方语言与数据主权的议程 上。对 大语言模型的偏见审计与数据治理 领域而言,让「数据从哪来」成为发布模型之前必须回答、并且可以被外部核查的问题。
她与合著者发布的《大模型的数据文档化实践指南》提出了一套结构化的数据披露框架,要求开发者说明数据来源、数据中包含的群体、采集方式、同意状态以及已知风险。这套框架已经被多家机构采用为内部流程模板。
她推动的「数据集卡」与「模型卡」实践,本质上是把工程流程里原本只存在于工程师之间的口头知识,转成必须书面交代、必须随模型一起发布的正式记录。
在她看来,数据的来源与使用是一个权利问题而不只是合规问题:这涉及被采集内容的人是否知道、被如何使用、能否拒绝,以及收益如何在链条上分配。
她对研究者身份的角色设想相当具体:研究者不只是改进模型,也应当成为把技术系统的外部性显性化、并推动制度回应的人。这一主张让她在学术论文之外,长期投入于面向政策制定者、标注工人和公众的说明性写作。
她公开发言时经常使用「我们」而非「我」,并把标注者、被遗漏的语言使用者与受影响社区放在论述的中心位置——这在一个以技术领先者视角为主的行业里,是相当少见的表达方式。