Dados para treinamento de IA
Corpora públicos da web multi-terabytes: cerca de 50 GB por milhão de páginas HTML, robots.txt e opt-outs de IA, filtragem de dados pessoais.
Resposta rápida
Para que servem os proxies residenciais para os desenvolvedores?
Desenvolvedores usam CrawlRelay proxy residencial para coletar dados públicos da web do local que importa: corpora para treinamento de IA, captura de páginas para agentes de IA, verificações com precisão por cidade de páginas de busca e anúncios, e monitoramento de preços em e-commerce. O tráfego custa US$ 1,50 por 1 GB e US$ 0,50/GB a partir de 50 GB, em outubro de 2026, e nunca expira. Pago com cripto, sem KYC.
Casos de uso
Agentes de IA
Uma ferramenta segura de captura e um servidor MCP através de saídas residenciais, com sessões por tarefa e regras de proteção.
Verificações de SERP e posição
O que ainda funciona em 2026: o robots.txt do Google, os processos, os bloqueios e verificações precisas por cidade das suas próprias páginas.
Monitoramento de preços
Preços locais, estoque e condições de entrega por país, extração JSON-LD, tráfego por produto por mês.
Qual configuração se encaixa em cada caso de uso?
| Caso de uso | Tipo de proxy | Sessões | Tráfego típico |
|---|---|---|---|
| Dados para treinamento de IA | Proxy residencial | Rotacionar; sticky apenas para paginação | 30–60 GB por milhão de páginas HTML |
| Agentes de IA | Residencial; móvel para visualizações apenas móveis | Uma sessão sticky por tarefa | ≈1 MB por tarefa de 20 páginas em HTML |
| Verificações de SERP e posição | Residencial com segmentação por cidade | Uma sessão curta por verificação de cidade | Pequeno: poucas páginas por verificação |
| Monitoramento de preços | Residencial por mercado | Rotacionar entre produtos; sticky dentro do fluxo | ≈1,8 MB por produto por mês, verificações diárias |
O que todos esses casos de uso têm em comum?
Dados públicos, coletados num ritmo que o site aceita, do lugar onde os dados são diferentes. Cada conta CrawlRelay opera sob a mesma Política de Uso Aceitável: sem logins em contas que você não possui, sem coleta de dados pessoais em desacordo com a lei, sem tentativas de driblar bloqueios deliberados dos sites, e um gateway que recusa Sites bancários, governamentais e portais de pagamento, além das portas SMTP (envio de e-mail) 25, 465 e 587.
Os hábitos de engenharia também são compartilhados: identifique seu crawler, limite concorrência por host, busque HTML antes de renderizar, pule páginas não alteradas, e mantenha cada pipeline em seu próprio subusuário com limite de tráfego. Os docs cobrem cada item com código.
Quais casos de uso o CrawlRelay não atende?
Tudo que dependa de se passar por pessoas ou burlar proteções: criar ou assumir contas, comprar estoques limitados ou ingressos com bots, enviar spam, testar credenciais, fraude ou coletar dados pessoais por trás de logins. Esses usos violam nossa política e foram o motivo da apreensão das redes residenciais em 2026. Suspendemos contas que usem o gateway para isso.
Casos de uso: perguntas
Posso usar CrawlRelay para dados de redes sociais?
Apenas para páginas públicas, coletadas dentro das regras da plataforma e da lei, e sem login em contas que você não possui. Muito conteúdo de redes sociais é dado pessoal, então verifique a base legal primeiro. Muitas plataformas oferecem APIs de pesquisa ou negócios; use-as quando existirem.
Posso usar CrawlRelay para verificação de anúncios?
Sim. Conferir como seus anúncios e páginas de destino aparecem em cada país e cidade é um uso padrão das saídas residenciais. Use segmentação por cidade e uma sessão sticky curta por verificação, como na página SERP.
Existe algum caso de uso que precise de proxies móveis?
Para verificar o que usuários de celular veem: sites móveis, apps e anúncios móveis. Proxies móveis 4G rotativos custam US$ 3,18 por 1 GB e US$ 1,50/GB a partir de 5 GB em CrawlRelay; teste-os no plano pequeno antes de enviar mais tráfego.