数智化转型网 人工智能资讯 每日人工智能资讯|英伟达首款开源全双工语音模型VoiceChat 11B正式发布

每日人工智能资讯|英伟达首款开源全双工语音模型VoiceChat 11B正式发布

在实时人工智能语音交互赛道上,硬件与技术巨头英伟达(NVIDIA)迎来全新突破。公司近日正式推出了旗下首款开源端到端全双工语音对话模型NemotronLabs VoiceChat11B,标志着其在语音生成与理解的底层架构上迈出了重要一步。数智化转型网www.szhzxw.cn

与以往需要串联语音识别(ASR)、大语言模型(LLM)以及语音合成(TTS)的传统分步架构不同,该模型通过一个统一的网络直接完成流式语音理解与生成。这一技术路径不仅彻底消除了多模型编排带来的繁琐交接,还大幅压缩了响应延迟。实测数据显示,其平滑轮换延迟低至448毫秒,且具备边听边说的全双工交互能力。当用户在中途插话时,智能体能够迅速让出话语权,展现出极高的流畅度。数智化转型网www.szhzxw.cn

值得一提的是,作为首个在对话持续进行时支持工具调用的开源全双工模型,VoiceChat11B 创新性地引入了独立的输出通道与预置的“保持”话术机制。在处理复杂的外部 API 请求时,系统可以通过侧通道自动触发操作员定义的过渡台词,有效避免了等待期间可能出现的长时间静默,让语音智能体的工程化落地变得更加顺畅。数智化转型网www.szhzxw.cn

不过,从实际部署角度来看,该模型目前仍处于试点阶段。由于其需要单张至少配备80GB 显存的高性能 GPU 才能高效运行,且官方将其标注为“仅限研究用途”,目前尚未提供成熟的托管 API。业内人士指出,尽管在长上下文及多轮对话的极端场景下仍存在一些局限性,但其开放的权重与容器设计,依然为联络中心、汽车座舱、零售点餐以及智能无障碍辅助等领域的开发者提供了全新的探索方向。数智化转型网www.szhzxw.cn

若您对人工智能感兴趣或为人工智能创始人,可添加数智化转型网小助手思思微信加入人工智能交流群。若您在寻找人工智能供应商,可联系数智化转型网小助手思思(17757154048,微信同号)

思思企微
思思企微

若您为人工智能服务商,可添加数智化转型网小助手Jasper,加入人工智能行业交流群。

鹿鸣企微
Jasper企微

声明:本文来自数智化转型网,版权归作者所有。文章内容仅代表作者独立观点,不代表数智化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。

底部图片
免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。https://www.szhzxw.cn/136793.html
0
标签:
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部