在近日奥斯汀举办的SXSW大会上,Cloudflare首席执行官马修·普林斯提出一个引人关注的预测:随着生成式人工智能(GenAI)的快速迭代及其对数据需求的指数级增长,到2027年,互联网流量中由自动化程序产生的部分将首次超越人类用户直接访问的流量。这一论断基于他对当前技术趋势与网络行为模式的深度观察。
普林斯指出,在GenAI尚未成为主流的互联网早期阶段,机器人流量仅占总流量的约20%,其构成主要包括两类:一类是谷歌等搜索引擎使用的合规爬虫,用于抓取网页内容更新索引;另一类则是诈骗分子操纵的恶意程序,试图通过自动化手段实施攻击或窃取数据。然而,GenAI的崛起正在彻底重塑这一比例。以AI代理为例,当用户需要完成复杂任务(如比较不同品牌数码相机的参数并生成购买建议)时,AI系统可能需在短时间内访问数千个网站获取信息,其单次任务的访问量可达人类用户的千倍以上。这种“集体式”的数据抓取行为正形成前所未有的流量洪峰。
他进一步分析称,尽管当前流量增长速度略低于新冠疫情期间流媒体平台爆发式扩张的阶段,但其持续性更强且未见放缓迹象。这种变化不仅影响科技行业,更将渗透至零售、金融、医疗等所有依赖互联网服务的领域,迫使企业重新评估其网络架构的承载能力与安全策略。
面对这一趋势,Cloudflare已调整技术布局。普林斯透露,公司正在开发一种名为“代理沙箱”的底层基础设施,旨在为AI代理提供类似浏览器新标签页的轻量化运行环境——AI可在沙箱内快速启动、执行任务,并在完成后自动销毁,从而降低长期占用资源的风险。这一设计既满足了AI对高效数据访问的需求,也试图缓解其大规模运行对网络性能的潜在冲击。
作为支撑全球20%网站运行的基础设施服务商,Cloudflare的产品矩阵已涵盖内容分发网络(CDN)、分布式拒绝服务攻击(DDoS)防护、“始终在线”缓存技术及AI机器人流量过滤工具。这些服务通过优化数据传输路径、缓存热门内容、拦截异常请求等方式,帮助网站在流量激增时维持稳定性,同时抵御自动化攻击。普林斯强调,随着AI驱动的流量占比持续上升,这类基础设施的重要性将愈发凸显,企业需提前布局以避免服务中断或安全漏洞。








