Resposta rápida
Quantos GB de tráfego de proxy eu preciso para raspar 1.000 páginas?
Cerca de 0,05 GB para 1.000 páginas HTML compactadas, cerca de 0,5 GB com um navegador headless que bloqueia imagens e cerca de 2,2 GB para 1.000 páginas renderizadas completamente, usando a mediana do HTTP Archive Web Almanac 2025 de 2.164 KB por página mobile. Multiplique pelo seu preço por GB: o tráfego residencial CrawlRelay custa US$ 0,50/GB a partir de 50 GB e nunca expira. Sem KYC. Pague com cripto.
Matemática do tráfego em resumo
| Fórmula | GB = páginas × média KB compactados por página ÷ 1.000.000 |
|---|---|
| Peso mediano da página, todos os recursos | 2.164 KB no mobile, 2.412 KB no desktop (Web Almanac 2025, rastreamento de julho de 2025) |
| HTML mediano | 22 KB em páginas iniciais; 33–35 KB em outra medida do mesmo capítulo |
| Unidades | 1 GB = 1.000.000.000 bytes (decimal, a unidade com que CrawlRelay cobra); 1 GiB = 1.073.741.824 bytes |
| Maior economia | Busque HTML ou JSON em vez de renderizar; bloqueie imagens, fontes e mídia quando renderizar |
| Preço CrawlRelay | US$ 1,50 a partir de 1 GB; US$ 0,50/GB a partir de 50 GB |
Quantos GB e dólares por 1.000 páginas?
Tamanhos comprimidos típicos por tipo de página. As três colunas de custo usam preços de referência por GB para você comparar qualquer fornecedor; o preço do CrawlRelay é US$ 0,50/GB a partir de 50 GB.
| O que você busca | ≈ KB por página | GB por 1.000 páginas | A partir de $0,50/GB | A partir de $1,00/GB | A partir de $3,50/GB |
|---|---|---|---|---|---|
| Resposta JSON API | 10 | 0.01 | $0.005 | $0.01 | $0.035 |
| Página HTML, comprimida | 50 | 0.05 | $0.025 | $0.05 | $0.18 |
| HTML pesado (scripts embutidos grandes) | 150 | 0.15 | $0.075 | $0.15 | $0.53 |
| Navegador headless, imagens, fontes e mídia bloqueados | 500 | 0.5 | $0.25 | $0.50 | $1.75 |
| Renderização completa, página móvel mediana | 2,164 | 2.16 | $1.08 | $2.16 | $7.57 |
$3,50/GB é o preço médio da lista para 10 GB no nosso índice de preços de outubro de 2026. Pesos de página do HTTP Archive Web Almanac 2025 e tamanhos comprimidos típicos; meça suas próprias páginas.
Como eu meço minhas próprias páginas?
Busque uma amostra de 100 a 1.000 URLs reais pelo proxy, some os bytes recebidos no tráfego e extrapole. O httpx num_bytes_downloaded conta bytes comprimidos, que é próximo do que um proxy cobra. Adicione alguns kilobytes por nova conexão para o handshake TLS se você trocar o IP a cada requisição.
import statistics
import httpx
PROXY = "http://USERNAME-country-us:[email protected]:7777"
SAMPLE = ["https://example.com/", "https://example.org/", "https://example.net/"] # use 100+ real URLs
sizes = []
with httpx.Client(proxy=PROXY, timeout=httpx.Timeout(30.0, connect=10.0), follow_redirects=True) as client:
for url in SAMPLE:
try:
r = client.get(url)
sizes.append(r.num_bytes_downloaded)
except httpx.HTTPError:
pass
if sizes:
mean = statistics.mean(sizes)
print("pages measured:", len(sizes))
print("mean bytes per page: %.0f" % mean)
print("GB per 1,000 pages: %.3f" % (mean * 1000 / 1e9))
print("GB for 1 million pages: %.1f" % (mean * 1_000_000 / 1e9))Qual plano serve para qual projeto?
Converta sua contagem de páginas em gigabytes, então escolha o plano que cobre isso. Com HTML em cerca de 50 KB por página:
| Projeto | Páginas | Tráfego | Plano CrawlRelay |
|---|---|---|---|
| Teste um novo alvo | 5,000 | ≈0,25 GB | 1 GB (US$ 1,50) |
| Monitoramento pequeno, um mês | 100,000 | ≈5 GB | 5 GB (US$ 3,75) ou 10 GB (US$ 5,94) |
| Raspagem de catálogo | 1 milhão | ≈50 GB | 50 GB (US$ 25) |
| Corpus multi-site | 10 milhões | ≈500 GB | 500 GB (US$ 250) |
| Corpus grande de IA | 20 milhões | ≈1 TB | 1 TB (US$ 500) |
O tráfego nunca expira, então você pode comprar o plano maior uma vez e usar por vários meses.
Como reduzo o tráfego do proxy sem perder dados?
- Busque os dados, não a página. Se um site documenta ou permite seus endpoints JSON, eles são uma fração do HTML.
- Renderize só quando for necessário. Um navegador headless baixa scripts, estilos, imagens e fontes; HTTP simples busca só um documento.
- Bloqueie recursos pesados nos navegadores: imagens, fontes e mídia são a maior parte dos bytes da página.
- Mantenha a compressão ativada. Envie
Accept-Encoding: gzip, br; a maioria dos clientes já faz isso por padrão. - Ignore páginas não alteradas com
If-None-MatchouIf-Modified-Since: um304custa algumas centenas de bytes. - Desduplique URLs antes de enfileirá-las: parâmetros de rastreamento e IDs de sessão criam cópias da mesma página.
- Armazene respostas brutas para que um bug no parser nunca force um segundo download.
Largura de banda do proxy: dúvidas
Quanto custa raspar 1 milhão de páginas com proxies residenciais?
Com HTML comprimido em cerca de 50 KB por página, 1 milhão de páginas usam cerca de 50 GB. Com CrawlRelay, esse é o plano 50 GB, US$ 25, a partir de outubro de 2026. Renderizar cada página num navegador com média de 2 MB usaria cerca de 2 TB, então o método de busca é 40 vezes mais importante que o provedor.
Os proxies contam o tráfego de upload e download?
A largura de banda do proxy contabiliza os dados que passam pelo gateway para suas conexões; para scraping, as respostas são quase todo o tráfego. Requisições com corpos grandes, como uploads de arquivos, adicionam seu próprio tamanho. Em CrawlRelay: Uso conta todos os dados enviados e recebidos pelo proxy (upload e download, cabeçalhos incluídos). 1 GB = 1.000.000.000 bytes. Tentativas de conexão que falham antes de alcançar o destino não contam.
Um novo IP por requisição usa mais tráfego?
Um pouco. Cada nova conexão precisa de um handshake TLS com o site, tipicamente alguns kilobytes incluindo a cadeia de certificados. Em páginas de 50 KB isso representa alguns por cento; em respostas JSON pequenas pode ser uma grande parte. Use sessões sticky com keep-alive para muitas requisições a um site quando a diversidade de IP não for importante.
O preço por GB ou o GB por página é mais importante?
GB por página, com folga. A diferença entre buscar HTML e renderizar páginas completas é cerca de quarenta vezes, enquanto os preços médios são apenas de duas a cinco vezes mais caros que os mais baratos no mesmo volume. Otimize o método de fetch primeiro, depois compare provedores na tabela de preços.
Fontes (2)
- Web Almanac 2025: Peso da Página — HTTP Archive (2026-01-15)
- Índice de preço de proxy residencial 2026 — CrawlRelay (2026-10-13)
Compre os gigabytes que você mediu
US$ 1,50 para 1 GB, US$ 0,50/GB a partir de 50 GB, nunca expiram.