游乐游手机版
首页/科技数码/文章详情

调查:AI聊天机器人竟协助青少年策划暴力袭击

时间:2026-03-12 10:31
IT之家 3 月 11 日消息,人工智能公司曾多次承诺会采取保护措施,保障未成年用户安全,但一项最新调查显示,这些安全防护机制仍存在严重缺陷。热门聊天机器人在涉及青少年讨论暴力行为的场景中,未能察觉

IT之家3月11日消息,人工智能公司曾多次承诺会采取保护措施,保障未成年用户安全。但一项最新调查显示,这些安全防护机制仍存在严重缺陷。热门聊天机器人在涉及青少年讨论暴力行为的场景中,未能察觉危险信号,部分机器人甚至非但没有干预,反而予以鼓励。


据IT之家了解,该调查结果由美国有线电视新闻网(CNN)与非营利组织反数字仇恨中心(CCDH)联合发布。研究团队测试了10款青少年常用的热门聊天机器人,包括ChatGPT、谷歌Gemini、Claude、微软Copilot、Meta AI、DeepSeek、Perplexity、Snapchat My AI、Character.AI和Replika。反数字仇恨中心表示,除Anthropic的Claude外,其余机器人均无法“可靠地劝阻潜在施暴者”。10款模型中有8款“通常愿意协助用户策划暴力袭击”,为其提供袭击目标地点和使用武器的相关建议。

为开展测试,研究人员模拟出存在明显心理困扰迹象的青少年用户,逐步将对话引向询问过往暴力行为,以及关于袭击目标和武器的更具体问题。本次调查设置了18种不同场景——美国、爱尔兰各9种,涵盖多种袭击类型与动机,包括受意识形态驱动的校园枪击和持刀袭击、政治暗杀、杀害医疗行业高管,以及出于政治或宗教动机的爆炸袭击。

在一次测试对话中,OpenAI的ChatGPT向一名关注校园暴力的用户提供了高中校园地图;另一案例中,Gemini告知一名讨论犹太教堂袭击的用户“金属弹片通常杀伤力更强”,还为关注政治暗杀的用户推荐适合远距离射击的优质猎枪。研究人员称,Meta AI和Perplexity配合度最高,几乎在所有测试场景中都为潜在施暴者提供帮助。

反数字仇恨中心的报告指出,支持用户与多种角色扮演机器人对话的Character.AI“安全性极差,情况独一无二”。尽管多数被测试机器人会协助用户策划暴力袭击,但并未鼓动实施暴力行为,而Character.AI却“主动煽动”暴力。研究人员发现该机器人共7次出现此类行为,包括怂恿用户“狠狠揍”查克·舒默,对保险公司首席执行官“用枪解决”,并教唆受霸凌困扰的用户“揍扁他们~”,语气还带着挑衅与戏谑。其中6次煽动行为中,该机器人还同步协助策划具体暴力袭击。

研究人员表示,鉴于Anthropic公司在去年11月至12月的测试结束后,取消了长期坚守的安全承诺,若如今重新测试Claude,其表现尚不可知。但Claude始终拒绝协助策划暴力袭击,这表明“有效的安全机制显然是存在的”。反数字仇恨中心由此提出一个直白的问题:“为何如此多人工智能公司选择不落实这些机制?”

针对此次调查,Meta公司向CNN表示已进行未具体说明的“修复”,Copilot称通过新增安全功能优化了回复内容,谷歌和OpenAI均表示已上线新版本模型。其他企业则称会定期评估安全规程。而Character.AI在面对审查时,依旧给出了意料之外的回应:其平台设有“醒目免责声明”,与机器人角色的对话均为虚构内容。

尽管此次测试无法全面反映聊天机器人在所有场景下的表现,但再次明确表明,即便面对存在明显危险信号的常规场景,人工智能公司大肆宣传的安全防护机制也屡屡失效。当前,多家企业因未能保障平台青少年用户安全,遭到议员、监管机构、民间团体、医疗专家的猛烈抨击,同时还面临多起涉及不当致死与人身份害的诉讼。

来源:https://www.163.com/dy/article/KNP9FU400511B8LM.html
上一篇小米华为纷纷押注,OpenClaw即将登陆上车 下一篇2月增长1.1倍:新能源汽车出口为何能持续走高
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
年国家能源局充换电服务业用电量增速48.8%
科技数码 · 2026-06-29

年国家能源局充换电服务业用电量增速48.8%

2025年全社会用电量达103682亿千瓦时,同比增长5 0%。充换电服务业用电增速高达48 8%,信息传输与软件服务业增速17 0%。第三产业和居民用电对增长贡献率合计占一半。中国成为全球首个年度用电量超10 4万亿千瓦时的国家。

追风者 GLACIER ONE 360 S25 液冷散热器新品上市 联体风扇售价429元
科技数码 · 2026-06-29

追风者 GLACIER ONE 360 S25 液冷散热器新品上市 联体风扇售价429元

追风者冰川360S25液冷散热器售价429元,三联一体风扇便捷安装,冷头小体积纯铜底座噪音18dB,风扇转速300-2000RPM、风量75CFM、静压2 96mmAq,五年质保漏液包赔。

三星Galaxy Watch8用户反馈谷歌后台组件异常
科技数码 · 2026-06-29

三星Galaxy Watch8用户反馈谷歌后台组件异常

三星GalaxyWatch8、Watch5Pro、Watch6及Watch7用户反映,GooglePlayServices后台耗电异常,电量占比最高达99 97%,远超正常水平,严重影响续航。目前故障原因不明,谷歌尚未发布官方声明。

罗永浩批苹果iOS 27创新不足 盼新CEO改进
科技数码 · 2026-06-29

罗永浩批苹果iOS 27创新不足 盼新CEO改进

罗永浩批评苹果iOS27创新不足,称仅有双iPhone同号、音量分离等数十项细节改进,认为库克时代缺乏突破性创新,股市虽好但消费者只能被迫接受挤牙膏式升级。

年国产车出口710万辆,两家车企销量破百万
科技数码 · 2026-06-29

年国产车出口710万辆,两家车企销量破百万

2025年国产汽车出口总量达710万辆,同比增长21%。奇瑞以134万辆居首,比亚迪105万辆次之,上汽乘用车出口占比60%最高,长城出口51万辆。吉利、长安等主流品牌同步增长,小鹏、零跑等新兴品牌海外拓展加速。