字节跳动发布全模态大模型Doubao-Seed-2.0-lite,AI能听会看还能直接“上手”干活

字节跳动旗下火山引擎于5月6日宣布,豆包大模型家族正式迎来首款全模态理解模型——Doubao-Seed-2.0 […]

字节跳动旗下火山引擎于5月6日宣布,豆包大模型家族正式迎来首款全模态理解模型——Doubao-Seed-2.0-lite。作为该系列的重磅升级版本,新模型彻底打破了单一模态的限制,实现了视频、图像、音频与文本的原生统一理解,标志着其在多模态交互领域迈出了关键一步。

该模型在视觉与逻辑推理能力上表现尤为亮眼。在物理、医疗等高阶学科的复杂推理测试中,其性能已大幅超越今年2月发布的Pro版本。而在细粒度感知以及具身理解等前沿领域,该模型更是达到了行业领先水平。通过融入语音理解技术,Doubao-Seed-2.0-lite 能够实现“音画同步”的深度联合推理。这意味着它不仅能“看懂”视频画面,还能结合背景音频精准判断视频内容的视听一致性,甚至能根据指令在长视频中精准定位特定事件,并还原复杂的人物关系脉络。

在音频处理层面,新模型展现了极高的翻译与感知精度,支持包括中英在内的19种语种转写及14个语种的互译。除了精准的语义识别,它还能敏锐捕捉语音中的情绪波动及环境背景声,使其理解能力更接近人类的自然认知。

值得关注的是,Doubao-Seed-2.0-lite 的 Agent(智能体)与 Coding(编程)能力也同步完成了进化。模型对多轮复杂指令的遵循度显著提升,具备了更强的自我拆解与校验能力。在开发领域,它的代码能力已覆盖前端页面、3D场景及游戏开发,能够交付视觉美观且工程完整的产物。

此外,该模型首次实现了GUI(图形用户界面)理解与执行的一体化。它不仅能识别网页或应用中的按钮、菜单等元素,还能像真人一样完成点击、拖拽、输入等操作,真正实现了从“读懂界面”到“端到端交付任务”的闭环。

目前,这一技术已在电竞复盘、在线教育及跨境电商等多个领域落地。例如在电竞场景中,AI可以作为教练,连续分析长达25小时的比赛视频与语音,自动生成战术复盘图谱。与此同时,更高效的 Doubao-Seed-2.0-mini 版本也已同步上线,为企业大规模、低成本部署全模态推理任务提供了更具性价比的选择。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

DeepSeek明确调休日计费规则,中秋国庆迎来十天"半价窗口"

9月19日,DeepSeek正式发布API峰谷时间补充说明,明确调休上班的周末以及中国法定节假日全天,均按空闲时段计费。这意味着,9月20日(周日调休上班)、1…
📅 10-19 · 👁 2026年10月19日
数智化转型网每日AI资讯 AI情报站

MiniMax 开源 Code CLI:命令行编程工具亮出 76.7% 通过率,把企业级 harness 摊在阳光下

MiniMax 把自家命令行 AI 编程工具 MiniMax Code CLI 的 v0.4.12版本正式开源,源码已上架 GitHub。作为 MiniMax …
📅 10-19 · 👁 2026年10月19日
数智化转型网每日AI资讯 AI情报站

阶跃星辰 Step 5 Preview 全量开放:600B 参数打平 K3 级性能,新用户最长白嫖 75 天

昨天一款名为 Step 5 Preview 的国产大模型突然杀出,仅用 6000 亿参数量就达到了 2.8 万亿参数量 K3 级别的性能,性价比非常高。今天该模…
📅 10-19 · 👁 2026年10月19日
数智化转型网每日AI资讯 AI情报站

双节前后 10 多款大模型蓄势待发:GPT-6 全系、Opus 5.2、V4.1 Pro 领衔

中秋及国庆双节临近,AI 行业却还有一波大的要来——佳节前后国内外至少有 10 多款大模型蓄势待发。
📅 10-19 · 👁 2026年10月19日
数智化转型网每日AI资讯 AI情报站

阶跃甩出 Step 5 Preview:600B 稀疏 MoE 只激活 27B,把开源旗舰的"性价比边界"往外推了一格

阶跃今天全量开放新一代旗舰基座 Step5Preview,定位很明确——一款为真实世界里 Agentic 任务而生的主力模型。它想解决的是 AI 模型里那道经典…
📅 10-19 · 👁 2026年10月19日
数智化转型网每日AI资讯 AI情报站

千问发布Qwen3.8-LiveTranslate:同传延迟降至2.3秒,还能保留你的音色

新一代同声传译大模型 Qwen3.8-LiveTranslate,在翻译质量、延迟、说话人识别和语音合成四个维度上全面升级。
📅 10-19 · 👁 2026年10月19日