随着人工智能技术日益深入地融入互联网平台治理,内容识别效率、风险研判能力以及生态治理的精细化水平均迎来全新变革。与此同时,社交平台上的风险形态也在持续演变——黑灰产作弊、虚假人设、诱导消费、私聊骚扰等传统问题,披上了更隐蔽、更具链条化的外衣,对平台治理的及时性、准确性和系统性提出了更高挑战。
近期,Soul App正式发布了《2026年第二季度生态安全报告》。报告指出,在第二季度,Soul围绕反诈防骗、违规内容处理、群聊与私聊治理、未成年人保护等关键环节,进一步将AI技术深度应用于实际场景。一个显著变化在于:风险识别已不再局限于单一的内容审核维度,而是延伸至账号、行为及社交链路的综合研判。

私聊保护机制再升级
相较于公开内容,私聊中的骚扰与不友善行为往往更为隐蔽,易给用户带来持续性的负面体验。第二季度,Soul重点优化了针对女性用户的私聊保护机制。
具体而言,平台依据消息内容、互动频率及账号行为,对疑似骚扰信息实施风险隔离,有效减少低质信息直接触达用户。针对那些在不同社交链路中反复接触女性用户的不友善账号,平台则通过多场景联动策略限制其持续触达——在最大限度保障正常沟通的前提下,降低骚扰风险。
数据表明,第二季度,Soul日均帮助用户抵御网暴与频繁骚扰3099次,日均处置存在私聊不文明行为的用户1737个,并通过产品提示日均引导用户文明发言19.9万次。
完善AI生成内容提示机制
在将AI应用于生态治理的同时,Soul也在持续完善社区内AI生成内容的识别与提示机制。针对AI人像、虚假生活场景以及疑似盗图内容,平台会综合调用图片元数据、外显标识、人像及图像特征,对可能影响真实社交判断的内容进行分层识别。一旦识别到相关特征,平台会通过中性提示帮助用户了解内容属性,而非直接给出结论。
