一句话看懂：网络安全公司 DataDome 最新报告显示，Meta 的 AI 爬虫在 2026 年第二季度向网站发起了超过 90 亿次请求，同比增长 163%，但几乎没有为网站带来任何实际访客流量；而 ChatGPT 的爬虫虽然请求量下降，却贡献了 AI 推荐流量的 88%，给出版商带来了可衡量的回报。
事件核心：发生了什么
根据 bot 管理平台 DataDome 发布的 Q2 2026 分析报告，AI 代理流量本季度整体增长了 45%。其中，Meta 旗下的 AI 爬虫（包括 Meta-WebIndexer 机器人）活动量环比飙升 163%，单季度请求量接近 90 亿次。这些爬虫大规模抓取网站内容，消耗了出版商的带宽、服务器资源和 CDN 费用，但几乎不产生任何用户点击或访问。相比之下，OpenAI 的 ChatGPT 爬虫虽然在第二季度减少了抓取频率，却通过引用来源和推荐链接占据了 AI 推荐流量的 88%，意味着每次抓取都能带来可追踪的读者。
为什么重要
这一数据揭示了 AI 公司与内容提供者之间正在快速分化的利益关系。传统搜索引擎（如 Google）的爬虫通过向网站输送流量来“支付”抓取成本，形成了一种良性交换。然而，Meta AI 的模式更像是一座“内容索引库”：它大量抓取网站内容用于训练和内部知识库，但并未提供透明的引流回报。若此趋势持续，中小型网站将面临成本上升而收益下降的双重压力。同时，该报告还提到 Model Context Protocol（MCP）信号已成长为可测量的流量来源，连接 AI 代理与外部工具，但也带来了新的攻击面，意味着企业需要针对不同 AI 代理制定差异化的访问策略。
对用户/开发者/创作者的影响
对于网站运营者和内容创作者而言，这一趋势意味着未来需要主动管理 AI 爬虫的访问权限，而非被动接受所有抓取。建议采取类似 DataDome 提示的策略：允许 Google 和 ChatGPT 的爬虫充分访问，对 Meta AI 进行速率限制以降低成本，对未知或可疑代理直接封禁。对于开发者，MCP 作为新协议的出现，要求其在构建 AI 代理与外部工具交互时，需额外考虑安全验证和资源消耗记录。对于普通读者，这意味着未来通过 AI 工具获取信息时，参考链接的可信度和可追溯性可能因来源网站策略不同而出现差异。
AI 工具推荐
想把多个 AI 模型放在一个入口？
GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型，适合写作、绘图、视频和日常 AI 工作流。
推广链接：通过此链接购买，我可能获得佣金，不影响你的价格。
值得关注的后续
目前公开信息显示，值得持续关注的观察点包括：一是 Meta 是否会调整其索引策略，例如像 Google 一样推出引用归因或流量交换机制；二是 OpenAI 能否在保持低抓取成本的同时，继续维持高效的推荐流量输出，这一平衡点将是其他 AI 公司的参考标准；三是模型上下文协议（MCP）是否会成为 AI 代理与外部系统交互的标准协议，从而带来新一轮的访问控制和安全合规需求；最后，监管机构是否会介入，要求透明化 AI 爬虫的数据使用行为与流量回报数据。
来源：TechRadar
