Cloudflare Radar实时数据显示，全球34.1%的HTTP流量来自机器人。Cloudflare首席执行官Matthew Prince判断，按当前增速，机器人流量最快将在2027年超过真人流量。现在，这还只是预测，不是既成事实。
这组数据指向的不是单一安全事件，而是互联网访问结构的变化。用户打开一个网页时，后台往往还有大量程序同步扫描、抓取和分析同一页面。Cloudflare提到，机器人流量并不等于恶意流量，其中既包括搜索引擎蜘蛛、网络监控工具和API集成服务，也包括攻击程序，因此这项统计更接近趋势指标，而不是犯罪统计。
AI爬虫已成第二大机器人类别
在各类机器人中，AI爬虫增长尤其快。Cloudflare统计显示，AI爬虫约占全部机器人流量的22%，规模仅次于搜索引擎爬虫，已经成为第二大类别。这类程序主要用于抓取网页内容，供AI公司训练模型，或用于即时问答系统的内容补给。
从份额分布看，AI爬虫阵营也在变化。Cloudflare数据显示，Meta-ExternalAgent约占16.3%，已经超过GPTBot；ClaudeBot约占11.6%；Applebot单月增长140%，占比从约2.97%升至7.15%。报道同时指出，不同报告中的数字会有波动，更适合作为趋���参考，而非精确排名。
按用途划分，训练型爬虫约占全部AI爬虫的51.5%，超过一半。也就是说，当前不少抓取行为并不是为了即时回答问题，而是在为后续模型训练持续储备数据。
流量结构变化正影响内容平台与安全团队
Matthew Prince给出的判断建立在一个关键前提上：机器人流量的增长速度约为真人流量的8倍。如果这个速度差持续，机器人在总流量中的占比会继续抬升。对AI公司来说，爬虫是训练数据的自动化补给线；对内容平台来说，阅读量的含义正在变化，因为机器会抓取内容，却不会像真人那样观看广告。
对安全团队而言，问题更直接。报道提到，当登录尝试中有94%来自机器人时，传统依赖人工审查的方式已难以应对。与此同时，Cloudflare给出的终端分布数据显示，移动设备占全球流量55.4%，桌面设备占44.6%。这套分类之下，机器正在成为不能忽视的新变量。