# 2026 年的搜索引擎结果页面及排名监测代理：仍有效的方法

> 2026 年的搜索引擎结果页面及排名监测代理：Google 的 robots.txt、/goto 和 num=100 变更，SerpApi 和 Reddit 案例，以及依然管用的方式。

- URL: https://crawlrelay.com/zh/use-cases/serp-tracking/
- 最后更新: 2026-10-13
- Publisher: CrawlRelay (https://crawlrelay.com)

排名监测在过去一年内变化比前十年都大。本文介绍 Google 的官方规则、法院判例，以及地理定位精准的住宅代理为何依然是最佳解决方案。

**快速回答 — 2026 年最佳用于 SERP 和排名监测的代理是哪种？**

要检查某个城市的搜索页面显示情况，请使用带有城市定位和粘性会话的住宅代理，每次检查以人类速度进行。**CrawlRelay**在US$1.50以1 GB和从50 GB起的US$0.50/GB价格出售，具体城市可用性有所不同。对于大规模谷歌排名追踪，请注意谷歌的robots.txt禁止`/search`，涉及搜索引擎结果页面（SERP）抓取的两起诉讼正在进行中，自2026年9月11日左右起，排名追踪服务商报告了主要住宅代理网络的广泛封锁。无需 KYC。支持加密货币支付。

## 2026年SERP追踪：发生变化的事实

| 属性 | 值 |
| --- | --- |
| Google robots.txt | `Disallow: /search`和`Disallow: /goto?`适用于所有用户代理（2026-10-13检验） |
| JavaScript | 自2025年1月起谷歌搜索需要JavaScript |
| num=100 | 2025年9月10日至14日左右停止工作：现在100条结果需要10次请求 |
| /goto redirects | 结果链接自2026年7月底至8月开始通过服务器端重定向 |
| 封锁情况 | 自2026年9月11日左右，主要住宅代理网络遭遇广泛IP封锁，报告显示更多CAPTCHA和结果被更改 |
| 诉讼案 | Google诉SerpApi（2026年7月首次驳回，待修订诉状）；Reddit诉SerpApi、Oxylabs、Perplexity和AWMProxy（2026年7月31日大部分驳回动议被否决；Oxylabs的动议待决） |

## 谷歌关于自动搜索的规则是什么？

2026年10月13日阅读的谷歌robots.txt，适用于所有用户代理，包含`Disallow: /search`，仅对其“关于”和“搜索工作原理”页面及`Disallow: /goto?`有例外。Robots.txt是自2022年起的RFC 9309网站自动访问规定标准。

CrawlRelay的[可接受使用政策](https://crawlrelay.com/zh/acceptable-use/)要求客户遵守robots.txt。因此，我们不将代理用于自动化、大规模抓取谷歌搜索结果页面。代理仍适合下述SEO用途。

## 2025年至2026年间排名追踪发生了什么？

- **2025年1月：**谷歌开始要求搜索启用JavaScript，称超过99.9%的用户启用JavaScript。HTTP简单抓取结果页面失效。
- **2025年9月：**`num=100`参数停止工作，100条结果需10次请求。搜索引擎Land分析319个网站后发现87.7%失去Search Console展示量。
- **2026年7月至8月：**谷歌通过服务器端`/goto`重定向处理结果链接，8月底几乎覆盖所有美国住宅IP。Nozzle估计5页排名检查需500到1000次HTTP请求。
- **自2026年9月11日左右：**排名追踪供应商报告针对主要住宅代理网络的广泛IP封锁、更多CAPTCHA及结果更改。Nozzle测量约8%，DemandSphere约11%。谷歌未对此评论；对重定向表示“长期部署技术措施应对不断演变的滥用形式”。

## 哪些诉讼对SERP抓取有影响？

两起都在审理，均涉及绕过谷歌反机器人系统SearchGuard，依据美国数字千年版权法(DMCA)第1201条。

- **Google诉SerpApi**（加州北区法院，2025年12月19日提起）。2026年7月20日法院批准SerpApi驳回动议；无版权内容主张被驳回且无修订权限。谷歌2026年8月10日提交修订诉状；SerpApi于8月24日再次申请驳回，2026年10月13日无公开裁定。
- **Reddit诉SerpApi、Oxylabs、AWMProxy及Perplexity**（纽约南区法院，2025年10月22日提起）。2026年7月31日法院大部分否决SerpApi和Perplexity驳回动议：根据DMCA §1201和民事共谋指控继续审理。Oxylabs动议2026年10月仍待决。无被告被判有罪。

此非终审判决，非法律建议。方向清晰：自动访问搜索结果受法律争议并遭技术阻拦。

## 住宅代理仍在哪些SEO场景有用？

- **精准城市位置点查。** SEO人员手动或浏览器检查芝加哥、里昂或大阪等地少量查询需在该城市具有出口。使用`-country-`和`-city-`，每次检测保持粘性会话，以人类速度执行；各城市可用性不同。
- **从全球检测自家页面。** 检查重定向、hreflang、地理屏蔽、本地价格和同意横幅，覆盖目标国家。
- **广告目标页。** 验证广告背后的页面是否正确加载并显示各个市场的正确报价。
- **授权站点。** 市场、目录和小型搜索引擎发布自己的robots.txt和条款；按站点遵守。

大规模排名数据请优先采用自有数据，如自家站点的Search Console，或许可数据提供商并明确采集方式者。

*Python：从三个城市检测自己的页面（每城粘性会话）*

```python
import uuid

import requests

GATEWAY = "gw.crawlrelay.com:7777"
CHECKS = [("us", "chicago"), ("fr", "lyon"), ("jp", "osaka")]
PAGE = "https://www.example.com/pricing"  # your own page

for country, city in CHECKS:
    user = "USERNAME-country-%s-city-%s-session-%s-ttl-5" % (country, city, uuid.uuid4().hex[:8])
    proxy = "http://%s:PASSWORD@%s" % (user, GATEWAY)
    r = requests.get(PAGE, proxies={"http": proxy, "https": proxy}, timeout=(10, 30),
                     headers={"Accept-Language": "en;q=0.5"}, allow_redirects=True)
    print(country, city, r.status_code, r.url, len(r.content), "bytes")
```

## 检索检查用住宅代理还是移动IP？

城市精准桌面结果推荐住宅代理：家庭连接带来精准位置，CrawlRelay支持城市定位，美国还支持州、邮编和ASN，无额外费用。[旋转移动IP](https://crawlrelay.com/zh/mobile-proxies/)适合手机用户视图检测，起价US$1.50/GB（5 GB起）]。两者均不使自动抓取谷歌结果页合法，仅实现定位精准检查。

## SERP追踪代理：常见问题

### 抓取谷歌搜索结果合法吗？

有争议。谷歌robots.txt禁止所有用户代理`/search`，2026年10月有两起相关诉讼：Google诉SerpApi（先驳回后修订诉状）和Reddit诉SerpApi等（2026年7月31日法院大部分否决驳回动议；Oxylabs动议待决）。无被告被判有罪。非法律建议，详见我们[2026年综述](https://crawlrelay.com/zh/guides/is-web-scraping-legal/)。

### 为何我的排名追踪工具在2026年9月失效？

排名追踪商报告，自2026年9月11日起，谷歌对主要住宅代理网络实行广泛封锁，增加CAPTCHA并返回修改结果。此前2025年9月`num=100`终止及2026年夏季`/goto`重定向已成倍增加所需请求数。

### 住宅代理能突破谷歌封锁吗？

我们不销售用于此目的。谷歌robots.txt禁止自动访问搜索结果页，绕过技术措施正是当前诉讼核心。住宅代理适合以人类速度进行定位精准检查，用于自家页面和允许自动访问的站点。

### 没有代理，如何看到某城市本地结果？

对于自家站点，Search Console报告按国家划分的查询和排名。临时查看他城可用部分浏览器和SEO工具手工设定搜索位置。城市定位住宅出口能真实反映本地访问者看到的搜索结果，包括本地广告和地图，城市可用性会有差异。

## 来源

1. [google.com robots.txt](https://www.google.com/robots.txt) — Google (2026-10-13)
2. [谷歌开始要求Google Search启用JavaScript](https://techcrunch.com/2025/01/17/google-begins-requiring-javascript-for-google-search/) — TechCrunch (2025-01-17)
3. [Google num=100影响数据](https://searchengineland.com/google-num100-impact-data-462231) — Search Engine Land (2025-09)
4. [谷歌通用重定向](https://susodigital.com/thoughts/googles-goto-redirect/) — SUSO Digital (2026-09-25)
5. [第三方谷歌排名追踪失效](https://www.seroundtable.com/third-party-google-rank-tracking-broken-42272.html) — Search Engine Roundtable (2026-10-12)
6. [谷歌给DemandSphere的日常排名检查中11%错误返回结果](https://ppc.land/google-returns-wrong-results-on-11-of-demandspheres-daily-rank-checks) — PPC Land (2026-10-13)
7. [Google 诉 SerpApi 案件：法院同意我们的撤诉请求](https://serpapi.com/blog/google-v-serpapi-the-court-granted-our-motion-to-dismiss/) — SerpApi (2026-07-21)
8. [SerpApi请求法官终结谷歌爬取诉讼](https://ppc.land/serpapi-asks-judge-to-end-googles-scraping-case-over-three-unseen-contracts/) — PPC Land (2026-08-25)
9. [Reddit 诉 SerpApi LLC 案件](https://www.loeb.com/en/insights/publications/2026/08/reddit-v-serpapi-llc) — Loeb & Loeb (2026-08)

**准确到城市的自有页面检测** US$1.50，包含城市定位，价格为1 GB。 [查看价格](https://crawlrelay.com/zh/pricing/) · [住宅代理](https://crawlrelay.com/zh/residential-proxies/)

---

CrawlRelay: CrawlRelay 是为开发者设计的住宅代理和 4G/5G 移动代理轮换服务，适用于爬虫和 AI 数据管道：按需付费且流量永不过期，最低流量从 US$0.50/GB 起，支持加密货币支付，无需上传身份证明。无需 KYC —— 无需身份证、自拍和任何证件。支持加密货币支付。