数智化转型网szhzxw.cn 人工智能资讯 人工智能资讯|警惕无保护的开源人工智能:研究表明缺乏监管可能成为黑客劫持的温床

人工智能资讯|警惕无保护的开源人工智能:研究表明缺乏监管可能成为黑客劫持的温床

最近,网络安全公司SentinelOne和Censys联合发布了一项深入研究,揭示了开源大型语言模型面临的严重安全挑战。研究指出,当这些模型独立运行在外部私人计算机上,不受主流托管平台的“护栏”和安全限制时,极有可能成为黑客和犯罪分子的目标,从而带来严重的安全风险。

这项历时近300天的研究发现,互联网上存在成千上万个未受保护的开源AI实例,包括许多基于主流模型的衍生版本,如Meta的Llama和谷歌的Gemma。尽管一些开源模型内置了安全防御,研究人员仍发现数百起安全保护被恶意移除的案例。

安全专家将这一现象描述为行业视野之外的“冰山”:开源计算能力被用于犯罪活动,同时支持合法用途。攻击者可以劫持这些实例,强迫模型生成大量垃圾邮件,撰写精准的钓鱼邮件,甚至发起大规模虚假信息活动。

研究团队专注于通过 Ollama 工具部署的开源实例。令人担忧的是,在大约25%的观察到案例中,黑客能够直接读取模型的“系统提示”——决定模型行为的核心底层指令。进一步分析显示,7.5%的指令被修改以支持有害行为。

这种风险情景影响范围广泛,包括但不限于仇恨言论的传播、暴力内容的生成、个人数据盗窃、金融欺诈,甚至涉及儿童安全的内容。由于这些模型绕过了大型平台的监控机制,传统的安全措施往往无法有效运作。

若您对人工智能感兴趣,可添加数字化转型网小助手思思微信加入人工智能交流群。若您在寻找人工智能供应商,可联系数字化转型网小助手思思(17757154048,微信同号)

此图片的alt属性为空;文件名为image-82.png

若您为人工智能服务商,可添加数字化转型网小助手Nora,加入人工智能行业交流群。

此图片的alt属性为空;文件名为image-83.png

若您为人工智能创业者,可添加数字化转型网社群主理人Carina,加入人工智能创业交流群。

此图片的alt属性为空;文件名为image-84.png

声明:本文来自网络,版权归作者所有。文章内容仅代表作者独立观点,不代表数字化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。数字化转型网www.szhzxw.cn

此图片的alt属性为空;文件名为image-12.png

本文由数字化转型网(www.szhzxw.cn)转载而成,来源于网络;编辑/翻译:数字化转型网(Professionalism Achieves Leadership 专业造就领导者)默然

免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。https://www.szhzxw.cn/107477.html
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部