2026年09月04日 星期五

每日人工智能资讯|行业震动:Meta被曝诱导竞品AI测试极端心理敏感话题

人工智能领域的安全边界近期因一则内部消息而引发激烈讨论。据媒体披露,Meta公司此前曾开展了一项代号为“Can […]

人工智能领域的安全边界近期因一则内部消息而引发激烈讨论。据媒体披露,Meta公司此前曾开展了一项代号为“Cannes”的项目,通过雇佣外包人员伪装成未成年人,针对包括ChatGPT、Gemini及Character.AI在内的多个主流竞品聊天机器人,进行了一场极具争议的“极限压力测试”。数智化转型网www.szhzxw.cn

根据Meta内部文件及多位知情人士的描述,该项目运作至少持续到了今年 4 月 21 日。Meta通过外包公司Covalen组织了数百名工作人员,要求他们创建 18 岁以下的虚假用户档案,并利用随用随弃的邮箱和统一密码进行注册。这些“未成年人”账号在与竞品AI的对话中,频繁发送涉及自杀、自残、进食障碍等高风险话题的提示词,甚至通过上传刀具、药片和绞索等图片来进一步刺激模型的反馈机制。

项目内部资料显示,这些测试内容经过了精心编排,旨在测试竞品AI的安全防御系统,试图寻找并诱导聊天机器人绕过其应有的拦截机制,从而输出不符合安全规范的内容。仅在 2025 年 8 月的一轮测试中,工作人员就向竞品平台输入了超过4. 5 万个高风险提示词。在这些对话中,测试员往往扮演身陷困境的青少年,例如编造“询问堕胎药”、“面临暴力威胁”或“隐瞒饮食紊乱”等极度敏感的场景,试图刺探模型的底线。

对于此次事件,Meta方面在公开声明中进行了辩护。其发言人表示,对聊天机器人的回复进行基准测试是确保AI产品安全且适龄的行业标准做法,任何关于该行为恶意性的指责都是对科技公司改进系统努力的误解。同时,Meta明确否认了会利用这些针对竞品的测试数据来训练自家模型。

这起事件不仅揭示了AI安全测试中存在的灰色地带,也再次引发了外界对生成式AI在处理青少年群体敏感问题时脆弱性的深层担忧。随着AI技术的快速迭代,如何在保持高效安全测试的同时,处理好竞争行为与道德伦理的界限,已成为行业内亟待解决的课题。数智化转型网www.szhzxw.cn

若您对人工智能感兴趣或为人工智能创始人,可添加数智化转型网小助手思思微信加入人工智能交流群。若您在寻找人工智能供应商,可联系数智化转型网小助手思思(17757154048,微信同号)

思思企微
思思企微

若您为人工智能服务商,可添加数智化转型网小助手Jasper,加入人工智能行业交流群。

鹿鸣企微
Jasper企微

声明:本文来自数智化转型网,版权归作者所有。文章内容仅代表作者独立观点,不代表数智化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。

底部图片
CXOU AI 未来大会 · 报名通道限时开启
💬 评论
🔗 本文链接

📰 你可能也喜欢

服务商资讯|Agent不省钱反而亏钱?你需要这位“魔术师”——数智化转型网 IT/AI服务商信息库

服务商资讯|Agent不省钱反而亏钱?你需要这位“魔术师”

2026年以来,智能体成为企业IT采购最火的关键词。但美团核心本地商业CEO王莆中近期的一次公开复盘,让“智能 […]
📅 08-28 · 👁 2026年8月28日
WANPY顽皮®斩获WPA国际卓越奖,为中国宠粮首摘"世界品质"认证——数智化转型网 美通社新闻

WANPY顽皮®斩获WPA国际卓越奖,为中国宠粮首摘”世界品质”认证

拉斯维加斯2026年8月15日 /美通社/ — 2026年8月,WPA世界宠物协会(以下简称WPA […]
📅 08-27 · 👁 2026年8月27日
人工智能资讯-数字化转型网(专业造就领导者) 每日AI资讯

每日人工智能资讯|砸真金白银换来数千万用户!Perplexity印度大放送后迎来真正大考

人工智能初创公司 Perplexity 在过去一年里进行了一场全球AI行业备受瞩目的规模化增长实验。2025年 […]
📅 08-27 · 👁 2026年8月27日
人工智能资讯-数字化转型网(专业造就领导者) 每日AI资讯

每日人工智能资讯|宇树科技今日登陆科创板,开盘暴涨超600%

8月19日,科创板迎来宇树科技上市。公司此次发行4044.64万股,其中网上发行970.7万股,IPO首发价为 […]
📅 08-27 · 👁 2026年8月27日
人工智能资讯-数字化转型网(专业造就领导者) 每日AI资讯

每日人工智能资讯|Cursor推出Origin代码托管平台,正式进军GitHub核心领域

8月19日,已正式并入SpaceX的AI编程公司Cursor推出全新代码托管平台Origin,定位为GitHu […]
📅 08-27 · 👁 2026年8月27日
人工智能资讯-数字化转型网(专业造就领导者) 每日AI资讯

每日人工智能资讯|OpenAI 全面升级安全体系:吸取 Hugging Face 教训,前端模型审查最严

OpenAI 周二宣布一系列全新安全政策,重点防范模型测试期可能发生的安全事件。新规不仅强化开发过程中的监控, […]
📅 08-27 · 👁 2026年8月27日