7月31日,金融时报一篇报道将AI企业Anthropic推至舆论中心。这家一向宣称“负责任地开发AI”的公司,其网络爬虫ClaudeBot却在24小时内对某个网站发起超过100万次访问,疯狂抓取数据用于训练自家Claude大模型,行为被指严重“失责”。
事实上,利用网络爬虫抓取公开数据在AI行业并不罕见,但Anthropic此次引发众怒的关键在于其做法过于粗暴。自由职业平台Freelancer曾公开批评:ClaudeBot曾在4小时内发起350万次访问请求,迫使平台不得不直接屏蔽。批评人士指出,Anthropic不仅无视网站robots.txt协议(爬虫应遵循的基本规范),还强行突破限制抓取数据——这种行径与其标榜的“负责任的AI”理念完全背道而驰。
维修社区iFixit的首席执行官Kyle Wiens同样忍无可忍。7月24日,他在X平台直接向Anthropic喊话:
@AnthropicAI,我知道你们急需训练数据,Claude也确实具备智能,但真的有必要在24小时内访问我们服务器100万次吗?
这些流量零付费,还挤占了我们的开发资源,实在不够厚道。
我们的服务条款已明确禁止如此使用内容,可你们@AnthropicAI表面沉默,实际做了什么?
如果真心想谈商业使用许可,我们随时可以坐下来沟通。
这段话可谓一针见血。当一家公司一边高喊“安全”与“负责任”,一边却以最野蛮的方式掠夺他人服务器资源和数据——这种言行不一,才是最令人失望之处。毕竟,AI训练离不开数据可以理解,但尊重网站规则、恪守最基本的网络礼仪,难道不应该是“负责任”的底线吗?
