聊天机器人难以识别假视频,甚至OpenAI自家的工具也被欺骗

最近,媒体分析公司Newsguard发布的一项研究揭示了当前人工智能领域一个令人尴尬的现实:尽管AI视频生成技术正在迅速发展,主流AI聊天机器人几乎无法识别这些“深度伪造”,

最近,媒体分析公司Newsguard发布的一项研究揭示了当前人工智能领域一个令人尴尬的现实:尽管AI视频生成技术正在迅速发展,主流AI聊天机器人几乎无法识别这些“深度伪造”,甚至开发者自己开发的工具也未能幸免。

研究显示,面对由OpenAI视频生成模型Sora制作的假视频时,OpenAI的ChatGPT表现令人失望,错误率高达92.5%。这意味着大多数Sora生成的视频,ChatGPT会误以为它们是真实录制。其他大型公司表现也不佳,xAI的Grok错误率高达95%,而谷歌的Gemini表现相对较好,但错误率仍维持在78%。

更令人担忧的是,现有的技术保护措施实际上毫无用处。虽然Sora会在生成的视频中添加可见的水印和隐形元数据,但研究发现这些标记可以通过免费工具或简单的“另存为”作轻松去除。一旦水印消失,聊天机器人不仅无法识别伪造,有时甚至“严重编造胡说八道”,引用虚构新闻来源来证明假视频的真实性。

针对这一问题,OpenAI承认ChatGPT目前无法判断内容是否由AI生成。由于顶级AI视频工具现在能制作出肉眼难以辨认的材料,且对策落后于技术发展,这无疑对虚假信息传播构成了重大风险。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

OpenAI 新模型自动挖出 948 个 Linux 内核提权漏洞,每个漏洞利用成本仅 1279 美元

当地时间11月4日,OpenAI 正式发布了一份备受瞩目的安全研究报告。报告披露,OpenAI 利用一款即将推出的全新网络安全模型,成功构建了一套涵盖自动化漏洞…
📅 11-07 · 👁 2026年11月7日
数智化转型网每日AI资讯 AI情报站

盖茨炮轰白宫 AI 监管僵局:生物武器风险或超新冠

在《金融时报》举办的 AI 未来峰会上,微软联合创始人比尔·盖茨把话说得很重。他称 AI 模型展现出的能力"惊人",无论造福还是作恶的潜力都…
📅 11-07 · 👁 2026年11月7日
数智化转型网每日AI资讯 AI情报站

GPT-6.2 蛛丝马迹提前泄露,OpenAI 三款新模型或本周亮相

一个不起眼的统计条目,成了新模型发布的前哨信号。部分 Codex 用户在查看用量明细时,意外发现"gpt-6.2-astra"的标识悄然出现…
📅 11-07 · 👁 2026年11月7日
数智化转型网每日AI资讯 AI情报站

美国中期选举变”数据中心公投”:76% 选民反对,AI 基建撞上地方墙

2026 美国中期选举结果陆续揭晓,AI 行业最看重的算力底座——数据中心,被推上了地方政治的审判台。The Verge 梳理发现,NBC 在选举日做的民调里,…
📅 11-07 · 👁 2026年11月7日
数智化转型网每日AI资讯 AI情报站

美国中期选举变天:选民以压倒性票数叫停 AI 与数据中心狂飙,大型科技公司集体反思

在刚刚落幕的2026年美国中期选举中,人工智能与数据中心的发展遭遇了前所未有的民意阻力。随着选民以压倒性多数支持限制人工智能与数据中心的候选人和相关议案,原本高…
📅 11-07 · 👁 2026年11月7日
数智化转型网每日AI资讯 AI情报站

谷歌为 Anthropic 190 亿美元数据中心项目提供信用护航

人工智能赛道的竞争格局正变得日益微妙而紧密。数据中心营运商 TeraWulf 日前正式对外公布,已与谷歌达成一项重磅信用支持协议,专门为人工智能企业 Anthr…
📅 11-07 · 👁 2026年11月7日