
1966年生于 中国/美国的Zhang Yaqin,其研究路径与语音识别与 AI 系统落地的主流路径几乎不重合。他参与建立了让语音识别从实验室走向数亿用户的工程体系,也证明了前沿研究的规模化不是靠堆人堆钱,而是靠把问题重新组织成可被并行化的结构。
一、问题一:语音识别在 1990 年代为什么慢到不可用
1970 年,这个坐标决定了 Zhang Yaqin 早年接触到的语汇。Zhang Yaqin 在这里最初接触的是 生于青岛,成长于一个教师家庭;他在少年时期迷上了数学与物理,自述其数学启蒙来自一本苏联科普读物;他在清华大学取得电子工程学士与自动化控制硕士学位,这套底层训练后来成了 Zhang Yaqin 处理 语音识别与 AI 系统落地 问题时最本能的工具箱。
他成长于一个崇尚理工与教育的家庭,数学与物理从小是明确的兴趣方向。
他公开提到过一部苏联科普作品对他的影响,其中包含「用数学描述世界」的观念——这在他后来反复强调的「基础科学决定技术上限」的立场中清晰可见。
他在清华的自动化控制训练背景,与他后来长期强调「系统级优化优于单点突破」的工程观是一致的。
他少年时的另一层背景是家境的变动——家庭经历过搬迁与生活条件的显著变化,这使得他很早就习惯了在资源受限的条件下做技术取舍。
他 1966 年生于青岛,那一年中国的计算刚刚起步,而他日后推动了语音技术在中国的大规模产业化。
二、1990 年代:把语音识别的问题拆成能并行处理的形式
1993 年的 从事大规模语音识别的系统化研究,提出以「最大似然」框架统一离散隐马尔可夫模型与神经网络的训练 是 Zhang Yaqin 的分水岭。核心问题是如何让语音识别在真实噪声与自由对话中可用——而他给出的答案是把声学模型、语言模型与解码三部分联合优化,而不是各自独立改进,这一点后来被整个 语音识别与 AI 系统落地 领域反复引用,而 这套「联合优化」的系统方法此后成为语音识别的主流范式,也让语音识别从演示走向了电话与嵌入式系统。
1990 年代初语音识别的瓶颈不在单个模型不够好,而在于各环节各自最优却合起来效果差——声学模型独立训练、语言模型独立训练、解码时又是另一套目标。
他与 colleagues 把这些环节统一到一个概率框架下优化,这个转变比任何单个模型的改进都更大地提升了实际识别率。
他在这段时期还系统研究了「少量标注数据」条件下的语音学习问题——这在语音数据难以获取的现实下极具价值,也为他日后在大规模产品中的数据策略打下基础。
他在 MIT 期间的导师与同事网络中接触到当时语音与统计信号处理的顶尖工作,这种训练让他习惯于用严格的评测而非直觉来判断方法优劣。
他在 1990 年代初进入语音识别领域,正值这一方向从实验室走向电话系统的前夜。
三、1998-2004 年:把语音识别送进电话系统
2000 年的 在微软主导语音识别技术的产业化,把语音接口带入 Windows 与各类语音服务,并推动研究团队从研究导向转向产品导向 是 Zhang Yaqin 的分水岭。核心挑战是研究指标与真实产品指标之间的巨大差距——研究上 5% 的错误率在电话信道上可能仍无法使用,而实验室没有真实信噪比与真实用户,这一点后来被整个 语音识别与 AI 系统落地 领域反复引用,而 语音识别由此成为消费级产品的标准能力,也第一次让「把 AI 做到可用」成为一个被证明可行的工程命题。
在微软他把语音技术从「演示系统」推向「产品能力」,这个过程的关键不是算法突破,而是建立针对真实信道噪声与真实使用场景的评测与迭代机制。
他推动建立的机制包括:真实电话信道数据集、面向失败的错误分析流程、以及让研究与工程团队共用同一套评测的机制。
他在这个过程中也明确表达过一个观点:决定 AI 产品成败的,往往不是模型本身的精度上限,而是「在真实数据分布下,错误率分布是否落在用户可接受的范围内」。
他同时推动了中国研究力量的回国与培养,此后十余年间他持续以产业与学术双栖的方式推动中美研究交流与中国 AI 人才生态建设。
他在微软推动建立的关键机制包括:真实电话信道数据集、面向失败的错误分析流程,以及让研究与工程团队共用同一套评测的机制。
他明确表达过一个判断:决定 AI 产品成败的,往往不是模型本身的精度上限,而是「在真实数据分布下,错误率是否落在用户可接受的范围内」。
他在 2000 年前后主导语音技术在 Windows 产品线中的落地,把研究指标转化为可用的产品能力。
四、问题二:深度学习有没有数据——百度与那个「先有数据」的判断
2013 年,Zhang Yaqin 加入 百度,把 微软研究院从事语音识别产业化与评测体系建设的阶段 时期积累的 把研究指标与产品指标打通的方法论,以及他在贝尔实验室与微软建立起来的工程评测体系 带进了 在一家以搜索与流量为生的公司里,如何把深度学习的数据与算力优势真正建立起来 这条全新战线。这也是 Zhang Yaqin 第一次需要在工程约束下做取舍。
他到百度后做的第一件关键事不是选模型,而是搭建数据与算力的基础设施——语音数据、标注流程、训练集群、以及面向失败的评测体系。
他推动把深度学习用于百度的搜索排序与广告系统,这两项业务的巨大流量与数据量使深度学习的效果被放大到产业可见的程度。
他主导的百度语音在 2010 年代中期达到并超过国际主要竞争者,这在国内 AI 产业史上是一个标志性的节点。
他在这段时期反复讲的一个判断是:数据是深度学习时代的第一资源,因此任何希望做 AI 的组织,第一件事应该是想清楚怎么持续获得数据——这个判断在今天的大模型时代同样成立。
他也推动知识图谱方向的研究,这是国内较早把结构化知识与深度学习结合并产品化的努力之一。
他到百度后做的第一件关键事不是选模型,而是搭建数据与算力的基础设施——语音数据、标注流程、训练集群与面向失败的评测体系。
他 2013 年组建百度深度学习研究院,把数据与算力基础设施的建设放在了首位。
五、2015 年之后:从大公司到投资与产业生态
这里有一个不能略过的争议:当时国内互联网公司的技术投入长期集中在应用层与流量运营上,基础研究与大规模算力投入被认为性价比不高。Zhang Yaqin 后来在多个场合解释过为什么 他的判断是:应用的差距最终会被数据与算力的差距吃掉,而后者一旦开始积累就无法被短期追平,并为 这意味着要在一个以短期业务指标为考核体系的组织里,为一件数年才见效的事争取资源与耐心 付出了具体代价。
他从百度离开后主要关注「研究到产品」之间的这段距离,并认为这段距离的跨度常常被低估——它需要的不是更多论文,而是工程文化。
他在多场合强调过「AI 时代的竞争是复合型人才的竞争」——既懂算法又懂工程、还懂某个产业纵深的复合型人是最稀缺的。
他近年也参与了 AI 治理与产业政策层面的讨论,关注全球 AI 竞争格局与中美技术关系的长期走向。
他持续在斯坦福、清华等高校推动 AI 方向的教育与研究合作,并担任多个产业研究机构的领导职务。
他 2016 年之后转向产业投资与研究孵化,持续推动国内 AI 生态的工程化。
六、他讲透的一句话:把「先有数据,再谈智能」讲成了一门生意经
从 在 DEC、微软与百度分别主导语音识别与深度学习的产业化,主张数据与基础设施先于算法,并在百度推动知识图谱与深度学习结合 到 持续从事 AI 投资、研究孵化与产业政策研究,并推动中美 AI 教育与研究合作,Zhang Yaqin 用 美国国家工程院院士(外籍院士)、IEEE Fellow 与国内外多项科技与教育荣誉(2017)给自己做了阶段性确认,而 使「数据与基础设施先行」这一中国 AI 产业路径的关键判断被广泛接受与沿用。
他的技术生涯有一条清晰的线索:从统计信号处理到联合优化框架,从联合优化到产业化方法论,从产业化到组织与生态建设——每一步都从「怎么让系统真正跑起来」出发。
他在百度时期的一个具体贡献是确立了「数据闭环」的组织方式:部署、收集、标注、训练、上线、再部署,让数据资产随使用持续增长——这在语音与搜索上都被验证有效。
他对国内 AI 人才培养的推动集中在工程与产业的结合点上,而非单纯的研究生培养——这与他对「复合型人才最稀缺」的判断一致。
他留下的最有价值的方法论是一句可执行的建议:任何想做 AI 的组织,先问「你能不能持续拿到数据」,如果答案是否定的,其它一切讨论都是空谈。
参考来源
- Zhang Yaqin 等,「A Maximum Likelihood Approach to Connectionist Speech Recognition」相关论文, 1990s
- Microsoft Research 关于语音识别产业化与评测体系建设的公开资料
- 百度深度学习研究院成立与语音技术发展的公开报道,2013-2015
- Zhang Yaqin 关于「数据先于算法」的公开演讲与访谈
- AI Institute 公开资料与产业投资案例
- 美国国家工程院院士公告与 IEEE Fellow 记录