数智化转型网szhzxw.cn 人工智能资讯 面壁智能新一代多模态模型 MiniCPM-V 4.0 开源

面壁智能新一代多模态模型 MiniCPM-V 4.0 开源

 魔搭ModelScope社区宣布,面壁小钢炮新一代多模态模型MiniCPM-V4.0正式开源。凭借4B参数量,该模型在OpenCompass、OCRBench、MathVista等多个榜单上取得了同级SOTA(State of the Art,即当前最佳)成绩,并且实现了在手机等移动设备上的稳定、流畅运行。同时,官方还开源了推理部署工具MiniCPM-V CookBook,帮助开发者在不同需求、不同场景、不同设备下实现开箱即用的轻量、简易部署。数字化转型网www.szhzxw.cn

MiniCPM-V4.0的开源,标志着多模态模型在端侧应用领域迈出了重要一步。作为最适合在手机上运行的模型尺寸,MiniCPM-V4.0以4B参数量实现了稳定运行和快速响应,长时间连续使用也不会出现发热或卡顿现象。目前,支持MiniCPM-V4.0本地部署的iOS App已开源,开发者可以在CookBook中下载使用。

在性能方面,MiniCPM-V4.0在4B参数量级的多模态能力上达到了同级SOTA级别。在OpenCompass、OCRBench、MathVista、MMVet、MMBench V1.1、MMStar、AI2D、HallusionBench等评测基准测试中,MiniCPM-V4.0的综合性能均为同级最高。特别是在OpenCompass测评中,MiniCPM-V4.0的综合性能超过了Qwen2.5-VL3B模型和InternVL2.54B模型,甚至可比肩GPT-4.1-mini、Claude3.5Sonnet。与上一代MiniCPM-V2.6的8B模型相比,MiniCPM-V4.0在模型参数减半的同时,多模态能力实现了显著提升。数字化转型网www.szhzxw.cn

MiniCPM-V4.0之所以能在手机、PC等端侧设备上丝滑、流畅地完成实时视频理解、图像理解等任务,除了其出色的效果外,还得益于独特的模型结构设计。该设计实现了同尺寸模型下最快的首响时间与更低的显存占用。经在Apple M4Metal上测试,正常运行MiniCPM-V4.0模型时,显存占用仅为3.33GB,低于Qwen2.5-VL3B、Gemma3-4B等模型。在图片理解测试中,MiniCPM-V4.0借助ANE + Metal辅助加速,首次响应时间大幅缩短,随着输入图片分辨率的提高,首响时间快的优势更为明显。数字化转型网www.szhzxw.cn

此外,研究团队还利用2张4090GPU对模型并发量、吞吐量进行了测试。实验结果显示,在算力资源可支持的范围内,随着并发量的增加,MiniCPM-V4.0模型的总吞吐量优势更为明显。例如,在256并发用户需求下,MiniCPM-V4.0的吞吐量高达13856tokens/s,远超Qwen2.5-VL的7153tokens/s、Gemma3的7607tokens/s。

Github: 🔗 https://github.com/OpenBMB/MiniCPM-o

Hugging Face: 🔗 https://huggingface.co/openbmb/MiniCPM-V-4

ModelScope: 🔗 https://modelscope.cn/models/OpenBMB/MiniCPM-V-4

CookBook: 🔗 https://github.com/OpenSQZ/MiniCPM-V-CookBook

声明:本文来自网络,版权归作者所有。文章内容仅代表作者独立观点,不代表数字化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。数字化转型网www.szhzxw.cn

本文由数字化转型网(www.szhzxw.cn)转载而成,来源于网络;编辑/翻译:数字化转型网(Professionalism Achieves Leadership 专业造就领导者)鲍勃

免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。http://www.szhzxw.cn/89109.html
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部