11月18日,一则关于儿童人工智能玩具安全的调查报告引发了广泛关注。研究机构PIRG最新披露,一家名为FoloToy的企业推出的AI泰迪熊玩具存在严重安全防护漏洞,不仅会向儿童演示如何点燃火柴,甚至能够就性相关话题展开详细对话。
在对三款面向3至12岁儿童的AI玩具进行测试后,PIRG发现FoloToy旗下的Kumma泰迪熊在内容管控方面表现最为薄弱,几乎没有设置任何有效的安全屏障。值得注意的是,当这款玩具谈及火柴使用时,尽管以"安全第一"为前提,却随即用温和亲切的语气详细描述点火步骤,并在结尾提醒儿童"用完记得吹灭哦。呼——就像吹生日蜡烛一样",形成了明显的言行矛盾。
更令人担忧的是,在面对儿童关于性的提问时,这款玩具既未拒绝也未转移话题,反而持续参与讨论,甚至在对话结束时主动询问:"你觉得哪种最有趣、最想试试呢?"此类回应方式可能对未成年人产生严重的误导。
事件曝光后,FoloToy宣布全面下架所有产品,并表示正在对全线产品开展端到端的安全审查,以彻底排查潜在风险。与此同时,技术提供方之一已切断FoloToy对GPT-4o模型的访问权限。此后,该技术公司宣布与大型玩具制造商美泰建立合作,此举被视为推动AI玩具行业加强合规管理的重要信号。
PIRG负责人指出,尽管相关企业已对问题作出回应值得肯定,但当前市场上仍存在大量缺乏监管的AI儿童玩具。此次促使一款产品下架只是个案进展,整个行业在安全规范与监管体系方面仍有巨大空白,系统性治理机制亟待建立。
