xAI罕见起诉Grok用户：指控其滥用AI生成儿童性虐待图片视频，已封停超 5 万个违规账户

据路透社报道，马斯克旗下AI公司xAI向南 卡罗来纳州男子特里·哈伍德提起诉讼，指控其滥用Grok生成儿童性虐待材料。哈伍德今年 2 月因涉嫌性剥削未成年人被捕，xAI指控他违反服务条款，当地时间周二已向得克萨斯州一家联邦法院提交诉状。

一、上传普通人照片生成深度伪造色情内容

xAI在诉状中指控哈伍德将成年人和未成年人的普通照片上传至Grok，随后试图生成以照片人物为对象的色情深度伪造内容，还被指制作未经成年人本人同意的色情图像。AI公司主动起诉用户涉嫌利用AI生成色情内容的案例此前极为少见，这一案件具有标志性意义。xAI要求法院判令哈伍德支付金额尚未确定的赔偿金，并永久禁止他使用Grok，诉状称”被告经过蓄意策划，把原告的工具变成犯罪武器”。

二、Grok内容安全问题遭全球审视，已促成 244 人被捕

诉讼提交之际，xAI正因Grok的内容安全问题受到全球审视，外界指控Grok允许用户制作未经当事人同意的色情深度伪造内容。xAI在诉状中披露，公司已在 2026 年暂停 52222 个账户，向美国国家失踪与受虐儿童中心提交 73604 份报告，促成至少 244 人被捕。这一数据反映出AI平台在内容安全治理上的力度正在加大，也凸显了AI生成内容被滥用的严峻现实。