数智化转型网szhzxw.cn 人工智能资讯 人工智能资讯|谷歌推出 EmbeddingGemma:高效的移动端文本嵌入模型

人工智能资讯|谷歌推出 EmbeddingGemma:高效的移动端文本嵌入模型

来自谷歌深度学习团队的最新消息,他们正式推出了 EmbeddingGemma,这是一款专为移动设备设计的开源嵌入模型。EmbeddingGemma 以其308百万个参数的高效设计,在 MTEB(大规模文本嵌入基准)中被评为500M 以下的最佳多语言文本嵌入模型,展现出强大的功能,如检索增强生成(RAG)和语义搜索,能够在没有互联网连接的情况下直接在手机等设备上运行。

EmbeddingGemma 的优越性在于,它的性能可与几乎是它两倍大小的热门模型相媲美。它不仅小巧而且灵活,适用于多种场景,支持768到128的可定制输出维度,并拥有2000个上下文令牌窗口,能够在手机、笔记本电脑和桌面等日常设备上运行。此外,它还与多种流行工具集成,用户可以方便地与 sentence-transformers、MLX、Ollama 等工具合作。

EmbeddingGemma 在建立 RAG 管道时表现出色,能够生成文本的嵌入,即将文本转换为数字表示,以高维空间表示其意义。在 RAG 管道中,首先根据用户输入生成嵌入,并计算其与系统中所有文档嵌入的相似度,从而检索到最相关的文段。这种高质量的嵌入能够确保最终生成的回答准确且上下文相关。

此外,EmbeddingGemma 在速度和资源消耗方面也经过精心设计,具有小巧、快速和高效的特点。其嵌入推理时间低于15毫秒,允许实时交互。它的离线功能确保了用户数据的隐私安全,特别适合于开发基于移动设备的应用程序。

开发者们现在可以利用 EmbeddingGemma 实现个性化的聊天机器人,进行文件搜索,或为特定领域进行快速微调。无论是在线下应用,还是需要高效性能的服务器端应用,EmbeddingGemma 都提供了理想的选择。

声明:本文来自网络,版权归作者所有。文章内容仅代表作者独立观点,不代表数字化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。数字化转型网www.szhzxw.cn

本文由数字化转型网(www.szhzxw.cn)转载而成,来源于网络;编辑/翻译:数字化转型网(Professionalism Achieves Leadership 专业造就领导者)萍水

免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。http://www.szhzxw.cn/92685.html
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部