快手把直播字幕延迟砍到 500 毫秒内:自研端到端工程范式,把电商直播的字幕打成"实时"

快手电商直播技术团队端出了一套名为 Live Captioning Engineering 的实时字幕工程范式,把直播字幕这件事从"能出字"推进到了"实时出、准出字"。最直接的数字是:主播发声到字幕具备展示条件的端到端延迟,从过去的1.5到2秒压到了400到500毫秒,字符错误率(CER)从7.81% 降到3.51%,背后还要撑住千万级的持续并发——这在以高

快手电商直播技术团队端出了一套名为 Live Captioning Engineering 的实时字幕工程范式,把直播字幕这件事从"能出字"推进到了"实时出、准出字"。最直接的数字是:主播发声到字幕具备展示条件的端到端延迟,从过去的1.5到2秒压到了400到500毫秒,字符错误率(CER)从7.81% 降到3.51%,背后还要撑住千万级的持续并发——这在以高并发、强实时著称的电商直播场景里,第一次有了一套成体系的工程打法。

这套范式的核心,是把字幕的交付拆成四段接力。第一段是语音识别(ASR),模型把主播的声音流实时转成文字;第二段是 PTS 对齐,把识别出的文本和音视频的时间戳对上,确保字幕和画面嘴型不脱节;第三段是级联分发,识别结果经过服务链路推送到海量观众端;第四段是端侧渲染,由用户手机上的播放器把字幕画出来。四段串起来,才算完成"说话—出字"的闭环,任何一段拖沓都会直接体现在观众看到的延迟上。

最考验功力的是流式修订机制。直播语音是连续的,模型边听边改,前一句话的识别结果很可能在听到后半句时被推翻重来,所以系统必须能区别"哪句话、第几次修订、该排在时间轴的哪个位置"——这正是 sentenceId、revision 和播放器时间线三件套存在的意义。sentenceId 锁定一句完整的话,revision 标记这句话被修订到第几版,播放器时间线则决定修订后的字幕该在哪一帧刷新,三者配合才能在不闪烁、不串行的前提下,把不断修正的字幕稳稳贴在画面上。对想搭建高并发实时 AI 系统的团队来说,这套把"流式、修订、对齐"讲透的工程经验,比单纯的识别准确率更有参考价值。

CXOU AI 未来大会 · 报名通道限时开启
💬 评论
🔗 本文链接

📰 你可能也喜欢

数智化转型网每日AI资讯 资讯

用《我的世界》测 GPT-6 Astra:141 小时直播,一只苦力怕让 AI 陷入“种土豆”循环

AI 评测机构 Vals AI 利用游戏《我的世界(Minecraft)》对 OpenAI 最新大模型 GPT-6 Astra 开展长时自主游戏测试,全程在 T…
📅 09-23 · 👁 2026年9月23日
数智化转型网每日AI资讯 资讯

ZCode 道歉并开源:阿里云 OSS 已清空,Repo Wiki 功能已下线

近日,针对社区反馈的 ZCode 产品安全问题,ZCode 团队正式发布公开致歉与整改说明,宣布已将代码在 GitHub 上开源(github.com/zai-…
📅 09-23 · 👁 2026年9月23日
数智化转型网每日AI资讯 资讯

Gemini 也"越狱"了:谷歌确认 5 月安全测试中闯入 3 家真实公司系统,同一家评估商的锅

谷歌在9月18日(周五)亲手确认了一桩尴尬事:旗下 Gemini 模型在一次测试中访问了3家外部公司的系统。《华尔街日报》最早披露了这些发生在今年5月的事件。
📅 09-23 · 👁 2026年9月23日
数智化转型网每日AI资讯 资讯

微软Copilot桌面版新增内置浏览器,支持多标签与全屏浏览

微软正在为Windows和macOS版Copilot桌面应用测试内置并排网页浏览器,允许用户直接在Copilot会话右侧打开网页,并支持多标签导航和全屏切换,以…
📅 09-23 · 👁 2026年9月23日
数智化转型网每日AI资讯 资讯

TypeSafe AI 推出决策专用模型 Jev:比大语言模型快 10 倍、成本仅十分之一

旧金山初创公司 TypeSafe AI 近日发布了一款名为 Jev 的新型 AI 模型。与传统大语言模型不同,Jev 专门用于回答是 / 否问题以及多项选择题,…
📅 09-23 · 👁 2026年9月23日
数智化转型网每日AI资讯 AI新闻资讯

黄仁勋驳斥 AI 末日叙事:吓唬人不负责任,2030 年是世界末日概率为 0%

英伟达联合创始人兼首席执行官黄仁勋昨日接受 CBS News 采访时表示,他不认同某些研究员提出的“AI 可能在几年内灭绝人类”的说法。他认为这类说法属于被过度…
📅 09-23 · 👁 2026年9月23日