快手把直播字幕延迟砍到 500 毫秒内:自研端到端工程范式,把电商直播的字幕打成"实时"

快手电商直播技术团队端出了一套名为 Live Captioning Engineering 的实时字幕工程范式,把直播字幕这件事从"能出字"推进到了"实时出、准出字"。最直接的数字是:主播发声到字幕具备展示条件的端到端延迟,从过去的1.5到2秒压到了400到500毫秒,字符错误率(CER)从7.81% 降到3.51%,背后还要撑住千万级的持续并发——这在以高

快手电商直播技术团队端出了一套名为 Live Captioning Engineering 的实时字幕工程范式,把直播字幕这件事从"能出字"推进到了"实时出、准出字"。最直接的数字是:主播发声到字幕具备展示条件的端到端延迟,从过去的1.5到2秒压到了400到500毫秒,字符错误率(CER)从7.81% 降到3.51%,背后还要撑住千万级的持续并发——这在以高并发、强实时著称的电商直播场景里,第一次有了一套成体系的工程打法。

这套范式的核心,是把字幕的交付拆成四段接力。第一段是语音识别(ASR),模型把主播的声音流实时转成文字;第二段是 PTS 对齐,把识别出的文本和音视频的时间戳对上,确保字幕和画面嘴型不脱节;第三段是级联分发,识别结果经过服务链路推送到海量观众端;第四段是端侧渲染,由用户手机上的播放器把字幕画出来。四段串起来,才算完成"说话—出字"的闭环,任何一段拖沓都会直接体现在观众看到的延迟上。

最考验功力的是流式修订机制。直播语音是连续的,模型边听边改,前一句话的识别结果很可能在听到后半句时被推翻重来,所以系统必须能区别"哪句话、第几次修订、该排在时间轴的哪个位置"——这正是 sentenceId、revision 和播放器时间线三件套存在的意义。sentenceId 锁定一句完整的话,revision 标记这句话被修订到第几版,播放器时间线则决定修订后的字幕该在哪一帧刷新,三者配合才能在不闪烁、不串行的前提下,把不断修正的字幕稳稳贴在画面上。对想搭建高并发实时 AI 系统的团队来说,这套把"流式、修订、对齐"讲透的工程经验,比单纯的识别准确率更有参考价值。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

Gemini3.8Live升级语音智能:对话、推理与任务执行进一步融合

谷歌近日发布Gemini3.8Live和Gemini3.8Live Extended Thinking,新增近实时推理、语音与思考同步处理,以及后台工具和API…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

OpenAI 宣布 GPT-5.5 将于 10 月 14 日下线: 与 Codex 同步移除

OpenAI 9 月 16 日宣布,GPT-5.5 将于 10 月 14 日从 ChatGPT、ChatGPT Work 和 Codex 中下线,覆盖所有订阅方…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

估值冲击1.2万亿美元!OpenAI密谈新一轮融资

人工智能领域的领头羊 OpenAI 近期正与投资者就新一轮私募融资展开初步洽谈,其目标估值高达 1.2 万亿美元。此次潜在融资是在 GPT-5.6 以及 Ast…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

​豆包大模型 2.1 Pro 0915 版本重磅发布:Agent 交付更稳、多模态 Coding 全面进化

9月16日,火山引擎官方正式宣布,豆包大模型2.1Pro(Doubao-Seed-2.1-pro)迎来了全新的0915版本升级,目前该模型的 API 已经全量上…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

vivo 正式发布智能体大模型矩阵,并重磅预研 30B MoE 端侧大模型

vivo 今日正式召开发布会,推出全新的智能体大模型矩阵,涵盖语音、端侧、云侧等四款核心大模型,全方位赋能终端设备的智能化体验。与此同时,vivo 官方宣布正在…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

Claude 发布重大升级:43 项全能工作流与 27 个巨头应用深度打通

Anthropic 于2026年9月15日正式宣布对其“中小企业版 Claude”进行重大功能升级。本次更新一口气推出了43项高效工作流,并新增了多达27个与主…
📅 10-21 · 👁 2026年10月21日