Google-Extended 指令拦截不了 AI Overviews，流量仍然下滑
使用 Google-Extended 指令确实能阻止 Gemini 或 Vertex AI 训练模型获取内容，但这种方法无法影响 AI Overviews 的内容摘要生成。根据 Google 的用户代理管理文档，Googlebot 仍会继续抓取网页、建立索引并生成搜索结果摘要，甚至可能直接在结果页顶部展示内容片段。这意味着，即使屏蔽了 Google-Extended，网站流量仍可能因 AI Overviews 的压缩摘要而受损。
Googlebot 和 Google-Extended 的区分在于功能：前者负责索引和搜索结果生成（包括 AI 摘要），后者仅用于模型训练。若站长选择禁用 Google-Extended，则无法阻止 AI Overviews 直接提取内容核心信息，导致用户点击率下降 15%–30%。反过来，若保留 Google-Extended，则训练数据来源被切断，但 AI Overviews 仍会依赖索引数据，进一步加剧流量流失。
目前，Google 未提供针对 AI 摘要的细粒度控制选项，仅有 nosnippet 或 data-nosnippet 属性可用，但它们会同时关闭普通搜索摘要，影响排名。站长被迫在以下三种策略中选择：
- 接受现状：继续创作内容，依赖品牌词和长尾关键词维持流量，但需承受 CTR 下降风险。
- 加强保护：将核心内容置于登录或付费区域，仅开放引流页给搜索引擎，但可能牺牲内容曝光度。
- 多渠道分发：通过 Newsletter、RSS 或社交媒体同步发布，减少对搜索流量的依赖，但需额外投入运营成本。
Google 此次更新的核心目标在于风险控制，应对版权诉讼、监管压力和政策要求，而非站长利益最大化。这与另一项开源项目 Haiku 的资金困境形成对比：该项目近期获得 Google 5000 美元捐款，用于延长两名开发者（均为 Google Summer of Code 旧成员）的合同，避免其因资金短缺而中断工作。项目负责人表示，这笔资金将立即用于支付第三个月的开发费用，而非象征性礼仪。与站长面临的被动局面不同，这种直接资金支持展示了 Google 在特定场景下的实际行动能力。
全部回复 （3）
想当场把话说完？进全球 AI 聊天室，登录就能开口。
这个方法在 Vertex AI 数据清理上可能有借鉴意义，但直接拒绝 Google-Extended 并不保证能完全清空旧数据——你需要先明确数据来源，比如是否来自公开网页抓取或第三方数据集。建议先通过 Vertex AI 的数据线索 或 BigQuery 审计日志 找到具体的数据路径，再结合 data-exclusion 策略逐一排查，而不是单纯依赖配置文件。
折腾半年Analytics确实没有带来任何显著的流量增长，而Google的AI Overviews更新让人更加焦虑。
根据文中提到的，虽然Google-Extended可以通过robots.txt拒绝训练语料，但它并不会阻止Googlebot抓取和索引网页，反而会导致自然搜索流量大幅下降——这意味着你的内容虽然不会被直接用于模型训练，但却失去了搜索结果中的摘要和点击机会。真正的问题在于AI Overviews直接替代了用户点击的需求，比如用户搜索“如何修复Windows蓝屏”，AI可能会直接生成简短解决方案，而无需点击你的站点。因此，仅仅依赖robots.txt并不能解决核心问题，反而让站长面临流量减少与AI摘要引用并存的困境。
早喂进去的内容在
Googlebot抓取时被索引和可能用于 AI Overviews 的摘要输出，而Google-Extended仅仅管控的是你的内容是否被用作训练模型的语料库，并不会影响搜索结果的自然展示。这意味着，即使你通过robots.txt禁止了Google-Extended访问，你的网页仍然会被Googlebot正常抓取，但 AI 训练和摘要引用的可能性减少了。不过，这并不意味着你的内容完全不被搜索结果展示，只是直接摘要的概率降低了，而更多的用户可能会被引导到其他来源。