针对高难度目标的旋转 4G/5G 移动代理

为什么网站更少屏蔽移动 IP？

因为一个移动 IP 通常对应许多真实用户。运营商使用运营商级 NAT：成千上万部手机共享有限的公网地址，RFC 6598 甚至预留了100.64.0.0/10范围用于这些网络内部。一个网站如果屏蔽了某个移动 IP，可能会锁定该 IP 后的所有用户，因此大多数网站对移动 IP 段屏蔽非常谨慎。

这种共享对你有成本。一个移动 IP 可能携带运营商其他用户的历史信息，速度还受信号和基站负载影响。所以移动流量适合特定目标，不是默认选择。

移动代理每 GB 更贵值得吗？

只有当住宅代理不能满足需求时才考虑。CrawlRelay住宅代理流量在50GB起价为US$0.50/GB；移动代理费用为US$1.50/GB。根据Proxyway 2026年代理市场研究，移动代理针对真实目标的中位成功率为75.26%，住宅代理为74.43%；所有服务商平均来看，移动代理优势不大。

收益取决于目标。付费前请先评估：

1. 同时用住宅代理和移动代理对一个目标跑200至500个URL。
2. 计算有效响应次数，非HTTP 200响应计数（因为屏蔽页面可能返回200）。
3. 用每次测试的流量费用除以有效响应数。
4. 当某域名移动代理单位有效响应成本更低时，才将其路由至移动代理。

如何仅将部分域名路由到移动 IP？

保留两个认证集，每个对应一个套餐，按请求选择。你的爬虫其他部分不变：使用相同网关、用户名格式和重试逻辑。

from urllib.parse import urlsplit

import requests

GATEWAY = "gw.crawlrelay.com:7777"
RESIDENTIAL = ("RES_USERNAME-country-us", "RES_PASSWORD")
MOBILE = ("MOB_USERNAME-country-us", "MOB_PASSWORD")
MOBILE_HOSTS = {"m.example.com", "app.example.org"}  # hosts where residential measured worse


def proxies_for(url):
    user, password = MOBILE if urlsplit(url).hostname in MOBILE_HOSTS else RESIDENTIAL
    proxy = "http://%s:%s@%s" % (user, password, GATEWAY)
    return {"http": proxy, "https": proxy}


for url in ["https://www.example.com/item/1", "https://m.example.com/item/1"]:
    r = requests.get(url, proxies=proxies_for(url), timeout=(10, 45))
    print(url, r.status_code, len(r.content))

移动池的轮换机制如何？

与住宅代理类似：不带会话ID的用户名每次新连接分配新的运营商 IP，带-session-<id>-ttl-<minutes>时保持固定 IP。实际中两点不同：

• 运营商会自行更换IP。 移动固定会话可能比TTL更早失去IP，因为设备重新连接网络。
• 延迟变化更大。 移动请求建议设置更长读取超时，约45至60秒，重试时换新连接，不要长时间等待。