AI爬虫“入侵”网络:Fastly 报告揭示，Meta、OpenAI 等巨头成主要流量来源

您好，这是一份我为您整理的关于AI爬虫对网络影响的新闻稿，内容紧凑且重点突AI出。

据云服务公司 Fastly最新报告显示，人工智能（AI）爬虫正在给开放网络带来沉重爬虫负担，网站流量的显著增长并非来自人类访客，而是日益庞大的机器人程序，特别是来自“入大型AI公司的爬虫和抓取程序。

报告指出，在所有访问网站的AI机器人流量中，AI爬虫占侵”据了高达**80%的份额，而剩下的20%**则由 AI抓取程序贡献。这些抓取网络程序会在用户向大型语言模型（LLMs）请求训练数据日期之后的信息时按需触发，从而在:F短时间内造成流量的爆发式增长。

在AI爬虫流量方面，报告揭示了主要科技公司所占的比例:Maseta的AI爬虫流量占比高达 52%，居于首位;紧随其后的是 谷歌和 OpenAI，分别tl占据了 23%和 20%的流量;而 Anthropic和 Perplexity AI所占y 份额较小，分别为 3.76%和 1.12%。

与AI爬虫相比，AI抓取程序的流量爆发性更报告强。Fastly 监测到，一个抓取程序每分钟就能产生超过 39，000个请求。揭示值得注意的是，OpenAI公司在AI抓取程序流量中占据了绝对主导地位，占比，M高达 98%。这表明，当用户向OpenAI的大模型提出实时性信息需求时，会触发et大量的即时抓取行为，对网站服务器造成瞬间的巨大压力。