谷歌的“合法入口”越来越少。Custom Search JSON API 对新客户关闭,并将于 2027 年 1 月 1 日完全停止服务,而从 2026 年 9 月 13 日起,自行收集搜索结果的服务商被阻止的请求比例显著上升。对于 SEO 团队、聚合器、价格监控和与网络搜索相关的 AI 代理来说,这意味着:在年底之前,您需要决定在 2027 年从哪里获取谷歌的结果。
发生了什么:一个月内的两条消息
官方 API 只剩最后三个月
谷歌在 2026 年 1 月 20 日宣布关闭 Custom Search JSON API,但对大多数团队来说,截止日期现在才开始显现。在文档页面上明确指出:API 对新客户关闭,而现有客户有时间到 2027 年 1 月 1 日转向替代方案。
在此日期之前,旧的条款仍然有效:
- 每天 100 次免费请求;
- 之后每 1000 次请求 $5;
- 上限为每天 10,000 次请求。
这是获取 JSON 搜索结果最便宜和最简单的官方方式。谷歌论坛上的开发者早在 7 月就抱怨在启用 API、活跃计费和未用完配额的情况下出现 403 错误,因此有些人的 API 实际上在官方日期之前就停止工作了。
抓取器的限制更为严格
9 月 18 日,Search Engine Roundtable 收集了 SEO 工具运营商的信号。Nozzle 的德里克·帕金斯表示,自 9 月 13 日以来,大多数尝试从谷歌搜索中提取数据的请求被阻止:收集的数据量下降了约 80%。他说,DataForSEO 的数据也出现了类似情况。Sistrix 的史蒂夫·佩恩表示,谷歌已经持续约一年不断改变结果的交付方式,而现在变化的速度非常快,他们的收集速度也在下降。
格伦·盖布将跟踪器的数据与网站的实际流量进行了对比:Ahrefs 的恢复效果最好,Semrush 的恢复滞后,Sistrix 明显落后。谷歌没有官方评论。
为什么这不是偶然,而是趋势
如果将事件按顺序排列,可以看到一系列的政策:首先提高自动收集的成本,然后关闭便宜的官方访问。
- 2025 年 1 月。 谷歌加强了搜索结果的保护,Semrush、SE Ranking 和其他跟踪器的数据出现了漏洞。
- 2025 年 9 月。 消失了参数
&num=100,该参数允许一次获取 100 个结果。要收集同样的深度,需要更多的请求。 - 2026 年 1 月。 宣布关闭 Custom Search JSON API。
- 2026 年 8 月。 自动客户的搜索结果中的链接被替换为加密重定向 google.com/goto。我们详细讨论了 goto 链接如何破坏跟踪器的报告以及解码的成本。
- 2026 年 9 月。 从 9 月 13 日开始,新的封锁浪潮开始影响抓取器。
微软比谷歌更早经历了这一过程:2025 年 8 月 11 日,它完全关闭了 Bing Search API(网页、图片、新闻、视频、Custom Search 等),并在 Azure AI Agents 中提供了 Grounding with Bing Search。这个不再是 JSON 格式的搜索结果,而是 LLM 的回答上下文。两大搜索引擎停止向所有希望者出售原始搜索结果。
谷歌提供了什么替代方案
官方的选项有三个,但没有一个是“一对一”的替代。
- Vertex AI Search。 谷歌推荐它用于在 50 个域名内进行网站搜索。这是一个企业产品,用于在您自己的索引中进行搜索,不返回谷歌的公共搜索结果。
- Search Element。 免费的网站搜索小部件,同样限制在 50 个域名内。不适合程序化收集搜索结果。
- Web Search Service API。 9 月 11 日,Search Engine Journal 注意到新的“完整网页搜索”API 的文档。它通过 REST 或 gRPC 返回 JSON,每个请求最多 20 个结果,但需要 Google Cloud 项目、API 密钥和与合作伙伴协议绑定的客户端 ID。每个请求都需要传递用户的 IP。如何成为合作伙伴、费用是多少以及限制是什么,文档中没有说明。谷歌仅建议填写兴趣表格。
简而言之:对于一个小型项目,涉及多个网站的搜索有解决方案。对于“了解谷歌在 Y 国家对请求 X 的显示”的任务,1 月 1 日之后将没有官方便宜的途径。
谁会受到更大影响
- 内部 SEO 脚本。 许多团队通过 CSE 检查位置或索引:每天 10,000 次请求足以覆盖小范围的关键字。从 2027 年起,这段代码将开始出现错误。
- AI 代理和 RAG 管道,其中网络搜索通过 Custom Search 连接,作为最可获取的“官方谷歌”。
- 品牌和内容监控:根据谷歌的请求搜索提及、文本副本、钓鱼域名。
- SEO 平台用户。 抓取器被迫为相同的数据量发送更多请求,最终成本转嫁到订阅上。9 月,许多人甚至在排名图表中出现了漏洞。
在 1 月 1 日之前该怎么办:四条路径
1. 检查您是否真的需要谷歌的搜索结果
从审计开始:代码中在哪里调用 customsearch/v1 以及原因。CSE 通常用于在自己的网站或多个域名上进行搜索,那么 Vertex AI Search 或 Search Element 可以解决这个问题。如果您确实需要谷歌的排名,则此路径不适用。
2. 第三方 SERP API
迁移的最快选项:提供商承担阻止、验证码和 HTML 解析,您获得 JSON。市场上的价格差异很大。根据 SERP 提供商 cloro 自己发布的比较(即这不是独立基准),价格范围从每 1000 次请求 10 个结果约 $1–2 到 $12。缺点是依赖于他人的基础设施:9 月的封锁浪潮显示,出售数据给其他人的提供商也可能会受到影响。
3. 自己的代理抓取器
提供对地理位置、频率和数据格式的控制,但需要工程工作和遵守规则。谷歌在其政策中禁止未经许可的自动搜索请求,因此这是一个具有明确法律和操作风险的解决方案,而不是“免费的 API 替代”。如果您选择这条路:
- 对于搜索结果的请求,使用看起来像普通用户的 IP:选择国家和城市的住宅代理,或者对于最敏感的场景使用移动代理。数据中心地址是谷歌识别得最快的;
- 将地理 IP 绑定到请求参数(
gl、hl、位置)。结果是根据位置个性化的,IP 和参数不匹配会导致“错误”的结果; - 保持请求类似于浏览器:真实渲染或正确的 TLS 和头部,暂停,适度的频率对每个 IP;
- 对于不在 google.com 上的辅助流量(下载找到的页面、检查重定向),使用更便宜的 数据中心代理 就足够了。在不需要保护的地方不要浪费住宅流量;
- 按天测量成功响应的比例。如果它急剧下降,比如 9 月 13 日,停止抓取并进行调查,而不是提高频率:这是“烧掉”池的最快方式。
抓取的实际方面——渲染、解析 AI 概述块、选择地理位置——在我们的 关于如何抓取谷歌搜索结果的 AI 概述指南 中进行了描述。
4. 更改排名的真实来源
对于您自己的网站,您有不依赖于抓取器的数据:Google Search Console 通过免费的 API 提供平均排名、展示和点击数据。格伦·盖布的检查很好地表明了这一点的重要性:9 月,跟踪器之间的数据出现了分歧,而实际流量仍然是基准。将 Search Console 作为标准,外部跟踪器用于竞争对手和您尚未展示的请求。
如何判断报告中的下滑不是您的问题
如果在 9 月 13 日之后,跟踪器中出现了排名的急剧下降或数据的漏洞,在更改网站之前:
- 将下滑的日期与 Search Console 进行比较:如果展示和点击数据平稳,问题出在抓取而不是排名;
- 查看是否所有关键字都受到影响。数百个请求的同时下滑通常表明抓取出现故障;
- 检查您的 SEO 工具的状态页面和博客:大多数提供商会发布关于抓取问题的通知;
- 不要仅根据一个工具做出结论——在 9 月,Ahrefs、Semrush 和 Sistrix 的恢复速度各不相同。
结论
谷歌正在逐步关闭对搜索结果的便宜访问:首先是 num=100,然后是 goto 重定向,现在是 Custom Search API 的结束和新的封锁浪潮。对于完整的网页搜索,官方替代方案存在,但仅限于合作伙伴且没有公开价格。在 1 月 1 日之前,值得找到代码中所有 CSE 的调用,决定您是否真的需要谷歌的搜索结果,并选择路径:SERP API、使用高质量代理的自定义抓取器或将 Search Console 作为自己网站的真实来源。那些将迁移推迟到 12 月的人将不得不匆忙进行迁移,因为跟踪器和提供商也在重新调整以适应新规则。
