该报告重点介绍了 AI 爬虫程序和抓取类爬虫程序在欺诈与滥用行为中不断演变的角色,并着重阐述了它们对不同地区和行业的影响。
- 商业行业中的 AI 爬虫程序活动最为活跃,我们在 2025 年 7 月到 8 月间观察到的爬虫程序请求量超过 250 亿次。
- 大规模的内容抓取很可能是 63% 的 AI 爬虫程序活动被归因于更广泛的其他数字媒体行业中出版细分市场的原因。
- 在医疗保健行业,超过 90% 的 AI 爬虫程序活动都与内容抓取相关,而实施这类活动的主要是搜索和训练用爬虫程序。
常见问题
AI 爬虫程序会大规模抓取内容,这会导致流量和广告收入骤减,从而给出版业带来了严重影响。
最佳实践包括采用基于风险的爬虫程序管理方法、监控 AI 抓取类爬虫程序活动并作出响应、部署特定于 AI 的安全控制措施、使用安全指南和框架,以及实施全面的 API 安全策略。
我们建议进行分层风险评估来区分高风险 AI(客户决策、开放式聊天机器人)、中等风险 AI(安全和威胁检测)以及低风险应用场景(内容创作、营销),以便实施适当的治理措施。