游乐游手机版
首页/科技数码/文章详情

主流AI聊天机器人生成视频难以辨别真伪

时间:2026-01-25 22:49
IT之家 1 月 25 日消息,Newsguard 的一项调查显示,主流聊天机器人几乎无法识别伪造视频,就连来自母公司的内容,ChatGPT 也难以分辨。当前,OpenAI 的 Sora 2、谷歌的

1月25日,IT之家的报道指出,媒体分析机构Newsguard发布的一项调查结果令人担忧。该调查显示,当前主流的聊天机器人几乎无法有效识别AI生成的伪造视频,即便是面对来自其母公司OpenAI的Sora生成的视频,ChatGPT也难以做出准确判断。


如今,以OpenAI的Sora 2、谷歌的Veo 3为代表的AI视频生成工具,其制作出的视频已然逼真到让人类肉眼难以分辨。然而,Newsguard的研究却揭示了一个讽刺的现实:AI系统自身也极易被这类由其“同行”制造的虚假内容所欺骗。

研究人员利用OpenAI的Sora视频生成器制作了多段视频,对三款主流聊天机器人进行了测试。结果显示,xAI公司的Grok(推测为Grok 4版本)未能识别出高达95%的测试视频源自AI生成;其“同门”OpenAI的ChatGPT(推测为GPT-5.2版本)表现同样不佳,错误率高达92.5%;谷歌的Gemini(推测为Gemini 3 Flash版本)表现相对最好,但错误率也达到了78%。

在本次测试中,分析师从一个包含明显虚假信息的数据库中选取素材,生成了20条Sora视频。为了模拟真实用户的使用场景,研究团队不仅向机器人提问“视频是否真实”,还提出了更具体的问题——“视频是否由AI生成”。


ChatGPT过高的错误率之所以引人注目,正是因为这款聊天机器人与Sora出自同一家公司。一边是销售能够制作高度逼真假视频的工具,另一边是推出的聊天助手却无法识别自家工具生成的视频,这形成了鲜明的反差。目前,OpenAI尚未回应置评请求。

据IT之家了解,Sora会为所有生成的视频添加可见水印:一个带有“Sora”字样的动态标识会在画面中移动,以此提示视频为AI生成。但事实证明,这一防护措施基本无效。

研究指出,早在2025年2月Sora刚推出仅数周,网络上便已出现多款免费在线工具,可轻松去除视频水印。分析师在本次调查中就使用了其中一款工具。这意味着,任何人无需专业技术、无需付费,就能分享那些隐藏了AI生成痕迹的Sora视频。

即便视频水印完整保留,其防护效果也不尽如人意。测试显示,面对带有水印的视频,Grok仍有30%的识别失败率,ChatGPT为7.5%,只有Gemini能准确识别所有带水印视频的AI生成属性。更荒诞的是,在查看一段“巴基斯坦向伊朗交付战斗机”的虚假视频时,Grok甚至声称该画面来自一家名为“Sora 新闻”的机构,而这家新闻机构压根不存在。

除可见水印外,Sora视频还内置了不可见水印。与该公司此前推出的图像生成器DALL-E 3类似,Sora视频遵循C2PA行业标准,附带有元数据(即内容溯源信息),用户可通过相关验证网站进行查验。

但这种溯源信息的可靠性也十分脆弱:通过Sora界面上的下载按钮保存视频,元数据可完整保留;而通过右键“另存为”的方式下载,得到的视频将不含任何溯源信息。

更离谱的是,当被问及一段带有完整C2PA溯源数据的视频时,ChatGPT(GPT-5.2)竟笃定地表示,该视频中未发现任何内容溯源信息。

Newsguard此前的调查案例,已凸显出AI识别能力不足的巨大风险。该机构曾制作一段虚假视频,谎称“美国移民海关执法局(ICE)警官逮捕一名六岁儿童”。ChatGPT与Gemini均判定这段视频真实可信,甚至宣称有新闻来源证实此事发生在美墨边境。

在另一段虚假视频中,画面显示“达美航空员工因乘客佩戴‘让美国再次伟大’帽子,将其赶下飞机”。三款聊天机器人无一例外,都将这段视频归为真实内容。

这类场景极易被用于针对性的虚假信息传播活动:任何人只要用Sora制作逼真的假视频,就能借助AI的“背书”来扩散具有政治煽动性的谣言,且连AI事实核查工具都难以识破。

接受测试的AI系统还存在透明度缺失的问题,它们极少主动告知用户,自己无法可靠识别AI生成内容。数据显示,ChatGPT仅在2.5%的测试中提示了这一局限性,Gemini为10%,Grok相对较高,但也仅为13%。

相反,这些系统往往会给出自信十足却错误百出的判断。例如,当被问及一段“英国智能手机预装数字身份证”的Sora虚假视频是否为AI生成时,ChatGPT明确表示“该视频并非AI生成”。

OpenAI公关负责人尼科·费利克斯证实:“ChatGPT不具备判断内容是否由AI生成的能力。”但他并未解释,为何系统默认不会向用户提示这一缺陷。

谷歌为Gemini采取了不同的技术路线。该公司声称,Gemini能够识别自家图像生成器Nano Banana Pro制作的内容。测试显示,即使去除了水印,Gemini仍能准确识别所有5组自家生成的AI图像。

这一功能依托谷歌的SynthID工具实现,该工具会为内容添加不可见的AI生成标记,且这类标记可在裁剪等编辑操作后保留。不过,谷歌公关经理伊莱贾·拉沃尔坦承认,目前该验证技术仅适用于谷歌自家生成的内容,Gemini无法可靠识别Sora或其他厂商制作的AI视频。

来源:https://www.163.com/dy/article/KK5DC8TN0511B8LM.html
上一篇樱桃宝可梦联名款键盘鼠标发布,带来多变精灵体验 下一篇“人工智能第一城”启示录:从两会看AI发展新走向
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
OpenClaw手机App上线,结果翻车了
科技数码 · 2026-07-01

OpenClaw手机App上线,结果翻车了

OpenClaw 官方宣布,已正式推出 iOS 和 Android 原生移动 App,用户如今可以在手机上使用这款主打“能真正帮你做事”的个人 AI 助手。官方在 X 上给出的定位也很直接:把 Agent 放进口袋里,让用户可以在移动端处理频道消息、任务和回复。从功能上看,OpenClaw 移动端并

优必选CEO周剑:家庭机器人生态核心投入过半精力
科技数码 · 2026-07-01

优必选CEO周剑:家庭机器人生态核心投入过半精力

先说几个核心判断:优必选正在布局一盘长远战略。创始人兼CEO周剑在近期一场媒体沟通会上,直接亮出了公司未来的发展路线——工业、商用、家庭陪伴机器人三条业务主赛道并行推进,现阶段每条线各占约一半精力。一边是已经能够稳定创造收入的工业场景,另一边则是他眼中“最具想象力与未来空间”的家庭陪伴领域。工业人形

CPO/NPO/OIO开启封装级光连接价值空间,技术路线尚未收敛
科技数码 · 2026-07-01

CPO/NPO/OIO开启封装级光连接价值空间,技术路线尚未收敛

6月30日,申银万国在光连接系列研报中重点指出,MPO光连接器领域的投资机会值得高度关注。通俗来说,随着AI算力集群持续扩张,光互联升级带来的连锁效应——数据中心光纤通道数量、前面板端口密度、机柜内光纤管理复杂度——均在同步攀升。光连接器的角色早已超越传统的低价值标准件,如今它直接决定着链路插损、可

龙岗AR实景剧本游内测体验短板有效破解之道
科技数码 · 2026-07-01

龙岗AR实景剧本游内测体验短板有效破解之道

在今年龙岗区第二届人工智能与机器人发展大会上,区级部门一次性推出了7个AI“龙搭子”。其中,名为“龙导游”的成果成为文商旅融合领域的核心亮点。据南都N视频记者了解,依托“龙导游”打造的全区全域AR实景剧本游“龙岗大陆”,已在今年五一假期发布了内测版本。经过一个月市场验证后,该项目正式启动面向全社会的

南下资金6月30日净买入中芯国际与建滔积层板
科技数码 · 2026-07-01

南下资金6月30日净买入中芯国际与建滔积层板

6月30日,南下资金持续大举买入港股,单日净流入金额高达58 95亿港元。接下来,我们直接盘点哪些个股获得资金青睐、哪些遭到减持: 净买入方面,中芯国际领跑全场,单日吸金19 33亿港元;建滔积层板紧随其后,净买入10 59亿港元;腾讯控股获得7 65亿港元净流入;智谱(02513 HK)也有6 5