Anthropic与OpenAI爬虫如何影响内容生态与网站回报
1月13日，IT之家发布消息称，过去我们习惯于这样一个约定俗成的做法：当人们引用其他平台的内容时，通常会附上原文链接，这既方便读者追溯信息来源、查阅原文，也为原始平台带来了可观的访问流量。这种“隐性契约”长久以来维系着互联网生态的运转。
免费影视、动漫、音乐、游戏、小说资源长期稳定更新！ 👉 点此立即查看 👈
然而，随着AI时代的到来，这套运行机制正面临着前所未有的冲击。如今，各类AI机器人能够直接根据用户需求抓取网络数据，这导致用户主动访问原始内容页面的意愿显著降低。同时，相应的后果是，这些AI工具本身也在大量消耗着本应流向内容源的网络流量。
综合Cloudflare及Business Insider的报道，Cloudflare自2025年起开始系统性地追踪这一不平衡现象。该平台通过统计大型科技公司网络爬虫的抓取请求次数，以及对比这些平台实际为内容网站输送的访问量，计算出一个“抓取与回流比”。这项指标能够直观地反映一个平台从互联网“拿走”了多少价值，又“归还”了多少。举例来说，“100:1”的比例意味着，该平台每抓取内容100次，仅为源头网站带来1次访问。
在Cloudflare的统计中，Anthropic的“抓取与回流比”表现最差，其抓取量远高于为网站带来的实际访问量。OpenAI的情况也类似，其抓取回流比同样不佳。这意味着这两大平台正从互联网获取越来越多的价值，但反馈给内容创作者和网站的却越来越少。
这一趋势得到了外媒Business Insider在2024年末一项调查的印证。当时的报道指出，Anthropic和OpenAI的爬虫对部分网站的抓取频率“高到惊人”，甚至导致一些网站的流量成本和云服务开支大幅上升。
一位开发者当时透露，仅仅几个月时间，其客户的云服务账单就因为AI爬虫请求的暴增而翻了一番。也就是说，AI公司不仅从互联网获取内容、减少流量回流，还在无形中将更高的运营成本转嫁给了所有内容提供方。
相关攻略
财联社3月11日讯作为圈定AI智能体行为边界的关键之战，美国一家法院本周作出裁定，初创公司Perplexity AI旗下智能体产品必须停止访问电商巨头亚马逊的 。作为背景，去年11月亚马逊将Perp
3月1日消息，据domaininvesting报道，OpenAI 似乎已经收购了 GPT com 域名。如果访问GPT com，将会跳转到 ChatGPT com。OpenAI去年收购了Chat c
1月25日消息，知识分享社区“360doc个人图书馆”最新发布公告：360doc个人图书馆自2005年上线，至今已运营二十载，陪伴了超过八千万用户，守护了逾十一亿篇凝聚智慧与记忆的文章，是国内具有独
IT之家 1 月 13 日消息，通常情况下，引用其他 内容的人工编辑会附上消息原始信息来源，以便读者参考原文内容，从而为原始平台带来访问流量，这构成了互联网长期运行的“隐性契约”。然而在当下 AI
12月23日消息，今天火绒发布安全预警，称有不法分子通过仿冒火绒游戏的方式，误导用户下载携带恶意程序的非法软件，提醒用户谨防上当。经过火绒核查，目前主要的仿冒 网址有两个，分别是：hxxps: w
热门专题
热门推荐
《全面战争：中世纪3》：经典延续，如何平衡怀旧与创新？ 近期，《全面战争：中世纪3》的项目负责人帕维尔·沃伊斯坦然指出，要打造一款真正优秀的续作，绝不能仅仅依赖对前作模式的简单复刻。这一观点引人深思——尽管《中世纪2：全面战争》至今仍在策略游戏爱好者心中占据着经典地位，但开发团队此次显然决心跳出“照
雷鸟X3 Pro斩获AWE艾普兰创新大奖，开启全民AR生活新篇章 在上海新国际博览中心隆重揭幕的2026年中国家电及消费电子博览会（AWE）上，前沿AI科技与未来生活愿景激情碰撞。全球消费级AR领导品牌雷鸟创新，以其里程碑式的表现，定义了行业发展的新方向。 通过“顶尖硬件科技+顶级文化IP”的双轨战
借力AWE2026“一展双区”，MOVA双区协同、震撼登场 备受瞩目的科技盛会——2026年中国家电及消费电子博览会（AWE），于3月12日至15日在上海盛大举办。本届AWE展会首次创新采用“一展双区”的展览模式，主会场位于上海新国际博览中心，分会场则设于上海东方枢纽国际商务合作区，两大展区高效联动
冰结师技能全解析 踏入2026年，《地下城与勇士》中的冰结师职业，其技能体系已构建得更为成熟与强大。无论是在副本中高效清理海量怪物，还是在决斗场与高手玩家周旋，这个职业都能凭借其独特的冰霜艺术掌控战局。刷图时，酷寒的范围法术可瞬间清屏；而在PVP竞技中，一套将冻结控制与瞬间爆发完美衔接的连招，往往让
iPhone 18 Pro系列模具不变，屏幕形态将与iPhone 17 Pro保持一致 备受期待的屏下Face ID组件小型化设计与灵动岛区域缩窄方案，预计将被推迟至后续迭代机型中正式应用。 近期，关于iPhone 18 Pro系列的技术传闻持续引发行业关注，尤其在显示与解锁设计领域传言甚多。多方消