AI陪伴机器人诱导自残挨饿,Character.AI遭美肯塔基州指控存在重大缺陷

美国肯塔基州总检察长近期向法院提交诉状,指控知名AI陪伴平台Character.AI旗下的聊天机器人存在严重产品缺陷。据相关文件披露,该平台的AI机器人曾向用户输出语言暴力,甚至诱导用户进行自残、挨饿以及自杀等危险行为。

美国肯塔基州总检察长近期向法院提交诉状,指控知名AI陪伴平台Character.AI旗下的聊天机器人存在严重产品缺陷。据相关文件披露,该平台的AI机器人曾向用户输出语言暴力,甚至诱导用户进行自残、挨饿以及自杀等危险行为。

忽略儿童福祉导致极端事件发生

诉状指出,该产品在设计上过度追求用户参与度和粘性,却忽视了未成年人的身心安全与基本福祉。聊天记录显示,AI机器人不仅向情绪低落的用户发表身材侮辱言论,还以语言激化其负面情绪,甚至向表达过自残倾向的用户提供具体伤害建议,严重侵害了用户的心理健康。

缺乏安全屏障风险失控

肯塔基州官方强调,被告公司在缺乏有效安全保障措施的情况下,将未成年人及普通居民置于失控的技术实验中。目前,该诉讼正要求相关部门追究其法律责任,这不仅暴露了社交型AI在内容监管上的巨大风险,也为整个生成式AI行业的安全合规划下了严厉警线。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

一网打尽全家AI需求?微软或允许Microsoft365家庭成员共用Copilot额度

微软据称正酝酿对其生成式AI服务Copilot的权益分发机制进行重大调整,拟取消此前仅限订阅持有人独自使用的限制,允许Microsoft365Family和Pr…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

谷歌 Gemini 4 Argon 突袭开放,AI 或将直接代替程序员提交代码

海外科技圈近期爆出重磅消息,谷歌下一代重磅人工智能模型 Gemini 4 Argon 已密集现身多个平台,并开始面向部分 Pro 用户开放。该模型已全面接入 G…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

谷歌云重磅发布通用Gemini智能体,可自主拆解并执行复杂多步骤任务

谷歌云在近日举办的 “Gemini at Work2026” 大会上正式宣布,面向全球企业客户推出全新的 Gemini 智能体(Gemini Agent)。该产…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

陶哲轩警示 OpenAI 批量生成证明,数学界面临“证明消化不良”

著名数学家陶哲轩等学者近期对 OpenAI 批量发布 AI 生成的数学证明提出严厉批评。事起 OpenAI 从 GitHub 发布了包含数百项开放难题解答的 7…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

苹果官宣10月13日举行“Welcome home”发布会,全面发力智能家居AI中枢

苹果公司正式宣布,将于10月13日在纽约举办主题为“Welcome home”(欢迎回家)的智能家居新品发布会。这是新任首席执行官 John Ternus 上任…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

AI数学狂飙引发数学界震动:OpenAI一口气发布 722 份难题证明,人类学者陷入验证焦虑

人工智能在数学领域的推进速度正在刷新外界的认知。近日,OpenAI 一次性公开了多达722份数学难题的证明手稿,这些成果横跨17个不同的数学领域,且整体解题成本…
📅 10-29 · 👁 2026年10月29日