AI 训练数据
多TB级公共网页语料库：每百万个HTML页面约50 GB，包含robots.txt及AI选择退出，个人数据过滤。
快速回答
住宅代理在开发者中的用途是什么？
开发者使用CrawlRelay住宅代理从关键地点收集公共网页数据：AI训练语料库、AI代理的页面抓取、搜索及广告页面的城市精准检测、以及电商价格监控。流量费用为US$1.50 /1 GB，50 GB起US$0.50/GB，截至2026年10月，流量永不过期。支持加密货币支付，无需KYC。
使用场景
AI 代理
通过住宅出口的安全抓取工具与MCP服务器，支持每任务会话及保护机制。
搜索结果页排名及检查
2026年仍有效：谷歌robots.txt、诉讼、屏蔽，以及对自有页面的城市精准检测。
价格监控
各国本地价格、库存及发货条件，JSON-LD数据抽取，每月每产品流量数据。
哪种配置适合各使用场景？
| 使用场景 | 代理类型 | 会话类型 | 典型流量 |
|---|---|---|---|
| AI 训练数据 | 住宅代理 | 轮换；仅分页时固定会话 | 每百万HTML页面30–60 GB |
| AI 代理 | 住宅代理；移动代理用于只看移动端 | 每任务一个固定会话 | HTML格式，约20页任务1 MB |
| 搜索结果页排名及检查 | 带城市定位的住宅代理 | 每个城市检查一次短会话 | 小规模：每次检测几页 |
| 价格监控 | 按市场使用住宅代理 | 产品间轮换；流程内固定会话 | 每天检测约1.8 MB每产品每月 |
这些使用场景有何共同点？
公共数据，按网站可接受的节奏收集，来源于数据有差异的地点。每个CrawlRelay账户遵守同一可接受使用政策：禁止登录非自有账户，禁止非法收集个人数据，禁止绕过网站故意封锁，且网关拒绝禁止用于银行、政府和支付门户网站，以及 SMTP 发信端口 25、465 和 587。
共享工程习惯：识别爬虫身份、限制每个主机的并发请求、先抓取HTML再渲染、跳过未变更页面、各条流水线独立子用户并限制流量。详见文档包含示例代码。
CrawlRelay 不支持哪些使用场景？
任何依赖冒充他人或规避保护机制的场景：创建或接管账户、用机器人抢购限量商品或票券、发送垃圾邮件、凭证检测、欺诈或登录后个人数据收集。此类用途违反政策，也是2026年住宅网络被查封的原因。我们会暂停用于此类用途的账户。
使用场景：常见问题
我能用 CrawlRelay 抓社交媒体数据吗？
只能抓公共页面，且必须遵守平台规则和法律，不得登录非自有账户。许多社交媒体内容属个人数据，法律依据需先确认。多数平台提供研究或商务API，应优先使用。
能用 CrawlRelay 做广告验证吗？
可以。验证您的广告及落地页在各国和城市的展示效果，是住宅代理的常见用途。请使用城市定位及每次检测短期固定会话，参考搜索结果页。
是否有需要移动代理的场景？
查看手机用户看到的内容：移动网站、APP及移动广告。轮换移动代理](/mobile-proxies/)价格为US$3.18 /1 GB，5 GB起US$1.50/GB，适用CrawlRelay；建议先在小方案测试后再增加流量使用。