数智化转型网szhzxw.cn 人工智能资讯 ​人工智能资讯|硅基流动上线线蚂蚁集团Ling-mini-2.0,速度与性能双丰收

​人工智能资讯|硅基流动上线线蚂蚁集团Ling-mini-2.0,速度与性能双丰收

近日,硅基流动大模型服务平台正式上线了蚂蚁集团百灵团队最新开源的 Ling-mini-2.0。这个新模型在保持先进性能的同时,展现出极高的生成速度,标志着在小体量的同时实现了大能量的突破。

Ling-mini-2.0采用了 MoE 架构,总参数达到16B,但在生成过程中每个 Token 仅激活1.4B 的参数,从而大幅提升了生成速度。这一设计不仅使得模型在处理任务时依旧保持卓越性能,还能与10B 以下的 Dense 语言模型以及其他更大规模的 MoE 模型进行有效比较。其最大上下文长度支持达到128K,极大提升了模型的适用范围。

在基准测试中,Ling-mini-2.0在多个领域的推理任务中表现优异。无论是编码、数学还是知识密集型推理任务,Ling-mini-2.0都取得了令人满意的成绩,展现出其强大的综合推理能力。特别是在高难度的任务中,该模型的性能优于许多同类产品,表现出色。

此外,Ling-mini-2.0在生成速度上也颇具优势。在2000Token 以内的问答任务中,其生成速度超过300个 Token 每秒,比传统的8B Dense 模型快了2倍以上。随着输出长度的增加,该模型的速度还可以提高,最高可达7倍的相对加速。

为了方便开发者使用,硅基流动平台还提供了多种接入方案和 API 文档,支持开发者在平台上进行模型的对比与组合,帮助他们轻松实现生成式 AI 应用。平台内还有多款大模型 API 供开发者免费使用,进一步推动了 AI 技术的普及和应用。

声明:本文来自网络,版权归作者所有。文章内容仅代表作者独立观点,不代表数字化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。

本文由数字化转型网(www.szhzxw.cn)转载而成,来源于网络;编辑/翻译:数字化转型网(Professionalism Achieves Leadership 专业造就领导者)萍水

免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。https://www.szhzxw.cn/93245.html
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部