企业防火墙拦截AI爬虫，或失去AI搜索曝光

2026年10月28日，开发者 Gagan Ghotra 指出一个矛盾现象：许多企业一方面希望自己在 AI 搜索中获得可见性，另一方面其防火墙却对 AI 公司的爬虫返回 404，或直接拦截这些抓取请求。他公布的截图显示，某站点借助 Cloudflare 安全服务挡住了 AI 公司 bot 的请求。Gagan Ghotra 认为，这意味着这些公司在 AI 搜索结果中可能根本没有机会被引用；如果它们希望被 AI 搜索收录，就需要先放行抓取。目前该讨论仍停留在开发者层面的观察与提醒，报道未提及涉及的具体企业名单，也没有相关企业回应或平台方调整规则的后续消息。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。