Cloudflare首席执行官马修·普林斯(Matthew Prince)于2026年6月4日通过社交平台X披露,其互联网流量监测系统Cloudflare Radar最新数据显示,AI代理(Agentic AI)产生的网络访问量已占全球总流量的57.4%,首次超越人类用户(42.6%)。这一历史性转折比普林斯本人预测的2027年底提前了超过一年,表明AI代理对互联网的使用正在以远超预期的速度增长。
普林斯在帖子中补充说,尽管数据“有些杂乱”,但“已经明确跨过了新关口”。他指的是Cloudflare Radar所捕捉到的代理AI流量占比持续上升,目前已稳定超过人类流量。Cloudflare作为全球最大的互联网基础设施服务商之一,其网络承载着全球约20%的Web流量,因此其数据具有行业风向标意义。
数据揭示转折点
根据Cloudflare Radar在2026年5月下旬至6月初的统计,代理型AI机器人(Agentic Bot)贡献了互联网总流量的57.4%,而人类用户仅占42.6%。这是自互联网商业化以来,自动化程序首次在一大类目(代理AI)上压倒人类。需强调的是,此次统计的“代理AI”不包括传统搜索引擎爬虫、网站监控探针等常规机器人——后者早在2010年代就已超越人类流量。普林斯在X上连发多条推文解释这一里程碑,坦言最初的预测是2027年末甚至2028年初,但“代理流量的增长速度让我不得不修正预期”。
Cloudflare内部数据还显示,过去12个月间代理AI流量增长了数倍,其中以使用大语言模型(LLM)的自主智能体增长最快。普林斯指出,“我们看到的不仅是流量占比的变化,更是互联网使用方式的根本转变。” 代理AI在信息获取环节中正在取代人类成为主要的页面请求发出者。
代理机器人如何产生海量流量
代理型AI机器人(Agentic AI Bot)之所以能产生远超人类的流量,源于其工作方式的不同。当用户向ChatGPT、Gemini等对话助手提问,AI会在后台同时或依次访问多个网页,提取与问题相关的信息,最终整合成答案。普林斯举例说,一个消费者在网上购物时可能只会访问3至5个网站,但AI为了提供全面的购物建议,可能会同时访问数十个电商、评测、比价网站,每一次页面请求都被计入代理流量。
Cloudflare分析指出,当前主流AI助手平均每次查询会触发5至15次网站访问,部分深度研究类问题甚至超过50次。随着AI应用日益普及,其网页请求总数已超过全体人类直接浏览的请求总和。此外,AI代理不会像人类那样有浏览疲惫感,它们可以7×24小时不间断运行,进一步推高了流量占比。
区域差异:亚洲人类流量仍领先
全球数据之下是显著的区域差异。Cloudflare Radar显示,在欧洲,机器人流量占比为68.6%,人类仅占31.4%;而在亚洲,人类流量仍以54.5%占据优势,机器人占比45.5%。非洲整体偏向机器人,北美同样如此。具体到国家,老挝的人类流量占比高达80.8%,越南达到84.7%,是典型的人类主导地区。而直布罗陀则走向另一个极端——在高峰时段,其97%的互联网流量来自机器人。
普林斯解释,直布罗陀作为小型经济体和通信枢纽,其网络可能存在大量集中部署的AI代理、自动化工具及企业级机器人,导致比例异常。而老挝、越南等国家因消费级互联网普及相对较晚、AI助手渗透率较低,人类用户流量仍占据主流。
对网站生态的冲击
AI代理流量的激增直接施压内容网站。不少中小型网站在过去数月中频繁遭遇流量高峰,服务器响应时间拉长,甚至因超出托管服务商流量限制而产生额外费用。Cloudflare网络上也观察到越来越多的网站开始部署反爬策略,通过分析User-Agent、浏览器指纹或行为特征来区分人类与AI,并选择性拒绝或限制AI代理的访问。
内容出版商正加紧制定更激进的内容访问规则。部分媒体已经开始要求AI公司支付内容使用费或签署授权协议,否则将屏蔽其爬虫。例如,一些大型新闻机构已更新robots.txt文件,明确禁止AI爬虫抓取内容。这一趋势可能会改变互联网长期以来的“默认开放”信息获取模式,转向更精细的访问控制。普林斯认为,随着AI流量继续增长,网站经营者必须重新思考其内容价值交换策略。
AI数据采集引发内容访问之争
AI代理的大量访问本质上是对网站内容的“程序化消费”,但多数网站并未为此做好准备。传统的robots.txt协议缺乏对AI代理的有效约束力,越来越多的网站站长呼吁建立更明确的标准。与此同时,AI公司需要高质量、多源的语料来训练和改进模型,双方在数据获取上的冲突日益激烈。
目前,一些技术探索正在出现,例如采用语义标记(如Schema.org)来标识内容用途,或通过区块链账本记录内容授权。Cloudflare也在开发面向AI爬虫的身份验证和访问管理方案,试图在不破坏开放性的前提下保护网站权益。这场博弈的结果将直接影响未来互联网的信息流动格局。
名词解释:
Agentic AI(代理型人工智能): 指能够代表用户自主执行任务、访问外部资源并返回结果的人工智能系统。在互联网语境下,它体现为能够独立搜索、浏览网页并提取信息的对话助手或自动化程序,如ChatGPT、Gemini等大模型驱动的智能体。
Cloudflare Radar: 由Cloudflare公司推出的互联网流量统计与趋势分析工具,基于其遍布全球的网络节点实时数据,可反映Web访问模式、安全威胁与流量构成。
代理型机器人(Agentic Bot): 专指由AI系统驱动的自动访问程序,以完成特定任务为目标,区别于传统搜索引擎爬虫。其核心特征是非按固定路线抓取,而是根据用户需求动态规划浏览序列。
本文参考来源:CNET




