过去五十多年间,互联网的技术架构与商业逻辑,始终围绕着一个核心假设展开:服务的对象是人。
正因人类会主动打开网页、点击链接,网站才需投入大量精力打磨视觉呈现与交互体验;正因人类注意力稀缺且易分散,搜索结果才需要排序,内容才需要个性化推荐。我们早已习惯的浏览行为、搜索动作与数字足迹,共同构筑了整个互联网经济运转的地基。
然而,这一基础正在悄然松动。
据 Cloudflare Radar 最新数据显示,在全球 HTML 页面请求中,Bot(自动化程序)所占流量比例已达 57.5%,而真实人类用户仅占 42.5%。这是互联网诞生以来首次出现机器请求量超过人类请求量的历史性拐点。
换言之,互联网默认的访问者身份,正从“人”转向“机器人”。过去我们常问:“这个网站有多少访客?”未来更关键的问题将是:有多少机器在替人访问?它们隶属于谁?目标是什么?
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

更值得警惕的是,Bot 流量分布极不均衡。虽然全球平均值为 57.5%,但在美国,该比例已飙升至 71.5%——这意味着,在全球数字化程度最高的市场中,每十次网页访问请求中,就有七次以上来自机器。
Cloudflare CEO Matthew Prince 在 X 平台坦言:“Welp, that happened faster than I predicted.”

就在三个月前,他在 SXSW 大会上还预测 Bot 流量超越人类流量的时间点将在 2027 年底。如今他不得不修正判断:现实推进的速度,远超所有人预期。
需特别说明的是,上述统计仅涵盖 HTML 页面请求,尚未计入图片、视频、API 调用及流媒体等其他类型流量。即便如此限定范围,这仍是一个划时代的标志性时刻——因为 HTML 页面,恰恰是传统 Web 世界最根本、最典型的入口形态。

过去所谓“上网”,本质上就是人类通过浏览器访问网页;而今天,这个第一入口,已不再主要由人类开启。越来越多的网页,正被网络爬虫、运维监控脚本、AI 数据采集器,以及快速崛起的 AI Agent 主动打开。
Bot 超越人类,不是终章,而是序曲
Bot 并非新生事物。搜索引擎爬虫、安全检测工具、比价监控系统,早已在幕后支撑着互联网平稳运行。真正具有颠覆性的,并非“Bot 出现了”,而是 Bot 的角色发生了本质迁移。
早期的 Bot,多服务于基础设施层面——抓取、建索引、做巡检,任务明确、边界清晰、行为可预期。但随着 AI Agent 的兴起,Bot 开始承载人的意图,执行端到端的复杂操作。
一个购物类 AI 不止查看价格,还会横向比对多个平台、过滤差评、核验优惠券有效性,甚至完成下单支付;旅行类 Agent 不单检索航班,还能同步评估酒店库存、比价、预订全流程;研究型 Agent 更能同时打开数十个网页,交叉验证信息后自动生成结构化报告。
传统爬虫是在“阅读网页”,Agent 则是在“使用网页”。

前者是信息接收者,后者是行为代理者。它不再满足于“看一眼”,而是致力于“做完一整件事”。正因如此,Bot 流量首次压倒人类,并非 Agent 时代的谢幕礼,而是其全面渗透 Web 生态的开幕信号。
8000% 增速背后:从信息摄取迈向任务执行
当前 AI 相关流量中,模型训练类爬虫仍是主力,但内部结构正经历剧烈重构。
HUMAN Security 发布的《2026 年 AI 流量报告》指出:训练型爬虫占比持续下滑,AI Scrapers 流量增长达 597%,而 AI Agents 与 Agentic Browsers 的请求量同比激增 7,851%!
2025 年整体自动化流量同比增长 23.51%,是人类流量增速(3.10%)的近 8 倍;其中,AI 驱动型流量年内增幅高达 187%。
Perplexity SEO 优化指南 — 如何获得 Perplexity AI 的引用。涵盖 Perplexity 引用行为、面向 Perplexity 答案的内容结构、Perplex...

这揭示了一个深层转变:AI 访问网页的目的,正在发生代际跃迁。
初期,AI 主要为获取训练语料而抓取网页;随后,AI 搜索兴起,推动实时抓取与摘要生成;如今进入 Agent 阶段,AI 已不满足于将网页转化为答案,而是将其嵌入完整任务链中——网页不再是静态信息源,而成了动态操作界面。
这也解释了为何 AI 流量高度集中于三大领域:零售电商、流媒体与新闻媒体、旅游与酒店业。
它们的共性在于:数据高度结构化、更新频率极高,且与交易行为强耦合。商品价格、库存状态、房型余量、用户评价等字段,天然适配机器读取、分析与决策。此时,网页已非展示窗口,而是机器决策闭环中的关键节点。
从前网站唯恐无人来访,如今却担忧来者非人
过去,网站最大的焦虑是“没流量”,所有运营策略都指向“把人吸引过来”。而在 Agent 时代,问题已然转化:网站可能坐拥海量访问,但访客并非真人。
机器读取网页后,提取关键信息,直接将结论呈现在 ChatGPT、Perplexity 等前端入口中。用户获得了答案,却未必跳转至原始页面。内容被消费了,但流量并未回流。
传统搜索引擎虽也抓取网页,但至少提供一种价值交换机制:我为你引流,你为我提供内容。而 AI 入口更为彻底——它完成抓取、理解、归纳全过程,最终交付答案,原网站则退居幕后,成为模型背后的“无名数据供应商”。
这正是 Cloudflare 推出 Pay Per Crawl(按爬取次数付费)模式引发广泛关注的根本原因:它实质上是在为“机器访问内容”重新确立计价逻辑。过往互联网的商业账本全部以人为中心:UV、PV、DAU、转化率……默认每一笔访问都来自真实用户。
一旦机器成为主流访客,这套指标体系便开始失效——机器可以制造访问量,却未必带来广告收益;能消耗内容资源,却难以沉淀品牌认知。流量,正逐渐脱离其原本的价值锚点。
入口权正从搜索框,向大模型与 Agent 迁移
入口控制权也在加速重构。报告显示,AI 流量高度集中于少数头部平台:OpenAI 相关 Bot 占比约 69%,Meta 约 16%,Anthropic 约 11%。

PC 时代,网站竞逐 Google 的搜索入口;移动时代,争夺 App 下载与信息流曝光;而 Agent 时代,真正的流量闸门,正收束于几家大模型公司手中。用户不再手动打开十个网页逐一比对,只需向模型提出一个问题,后者即代为筛选、压缩,甚至自动执行。
网站所面对的,已不只是 SEO 优化问题,更是全新命题:我的网页能否被 Agent 正确解析?信息是否具备足够可信度供模型调用?服务接口是否开放且稳定?内容被机器消费后,能否获得合理回报?
未来,大量网站或将演化为双轨结构:一层面向人类,争夺注意力与停留时长;一层面向 Agent,争夺机器可读性与调用友好度。前者依赖叙事张力、视觉表现与情感共鸣;后者则依赖结构化标记、权限配置、标准化接口与清晰的责任边界。
流量主体更迭所引发的系统性变迁
当互联网的流量主体由人转向 Agent,随之而来的是三个维度的深层变革:
网页的本质变了——从供人阅读的信息载体,转变为供机器调度的操作界面;
价值的衡量标准变了——从依托人类注意力的广告变现,转向基于机器调用频次与质量的服务定价;
流量入口的归属变了——从搜索引擎的关键词分发,转向大模型的统一指令响应与结果分发。
57.5% 远非终点,它极可能只是起点——标志着互联网正从“人类的浏览场”,迈入“机器的执行场”。人,依然是意图发起者与价值最终归属者,但中间的触达路径、交互方式与交付过程,已不可逆地交由 Agent 承担。
本文来自微信公众号 “AI前线”(ID:ai-front),作者:四月,36氪经授权发布。

















