API proxy residenziali rotativi per web scraping

Come funziona l'API dei proxy residenziali?

Invii ogni richiesta a un unico gateway, e il gateway la inoltra tramite un IP residenziale corrispondente al nome utente che hai fornito. Non c'è alcuna lista di IP da scaricare né codice di rotazione da scrivere.

1. Autenticati con il nome utente e la password del tuo piano o di un sotto-utente, oppure da un IP presente nella lista bianca.
2. Scegli l'exit aggiungendo parametri al nome utente: -country-de, -city-berlin, oppure per gli Stati Uniti -state-ny e -zip-10001; -asn-7922 seleziona un provider internet senza costi aggiuntivi. La disponibilità delle città varia.
3. Scegli la sessione: senza un ID di sessione, ogni nuova connessione ottiene un IP dal pool, di solito differente; -session-<id>-ttl-<minutes> mantiene lo stesso IP fino a 30 minuti, anche se l'IP può cambiare prima.

Lo stesso nome utente funziona sulla porta HTTP (7777) e sulla porta SOCKS5 (7778). I siti HTTPS passano attraverso un tunnel CONNECT, quindi il TLS avviene tra il tuo client e il sito web.

import requests

GATEWAY = "gw.crawlrelay.com:7777"


def proxy(username, password):
    url = "http://%s:%s@%s" % (username, password, GATEWAY)
    return {"http": url, "https": url}


# Rotating: each new connection usually exits through a different residential IP in Germany
r = requests.get("https://api.ipify.org", proxies=proxy("USERNAME-country-de", "PASSWORD"), timeout=(10, 30))
print("rotating exit:", r.text)

# Sticky: the same IP for up to 30 minutes, across connections (it can change earlier)
sticky = proxy("USERNAME-country-de-city-berlin-session-crawl42-ttl-30", "PASSWORD")
for _ in range(3):
    print("sticky exit:", requests.get("https://api.ipify.org", proxies=sticky, timeout=(10, 30)).text)

Proxy rotanti o sticky: quale sessione deve usare uno scraper?

Ruota per pagine indipendenti; usa sticky per i flussi. Un crawler che scarica migliaia di pagine prodotto o articoli non correlate dovrebbe aprire una nuova connessione per ogni pagina, senza ID di sessione, così il carico si distribuisce su molti proxy residenziali. Un flusso in cui il passo successivo dipende dal precedente, come la paginazione con cursor legato a un cookie, deve mantenere una sessione sticky fino al termine del flusso.

La rotazione avviene su ogni nuova connessione, non su ogni richiesta HTTP. Un client che mantiene viva una connessione mantiene la stessa exit per tutte le richieste su quella connessione. La guida alle sessioni mostra come gestire questo su requests, httpx, Scrapy e Playwright.

Quale tasso di successo posso aspettarmi dai proxy residenziali?

Aspettati un alto tasso di connessione e un successo inferiore su destinazioni protette, e misura entrambi. Proxyway’s Proxy Market Research 2026 ha testato 13 fornitori: la rete residenziale mediana ha risposto al 99,28% delle richieste, ma solo il 74,43% delle richieste verso destinazioni reali come Amazon, Google e Instagram è andato a buon fine.

Il divario è dovuto al filtro del target, che nessun proxy può rimuovere. Non pubblichiamo alcun dato sul tasso di successo nostro finché non ne avremo misurato uno con metodo dichiarato. Confronta i provider sul costo per richiesta riuscita per i tuoi target: invia le stesse 1.000 URL a ciascuno, conta le risposte utilizzabili e dividi il costo del traffico per quel numero.

Da dove provengono gli IP residenziali?

Da reti partner consolidate. CrawlRelay non gestisce una propria rete di dispositivi: rivende IP da reti partner upstream consolidate. Il nostro provider upstream conferma che i proprietari dei dispositivi acconsentono e possono rinunciare, e che la sua fornitura non proviene da reti sequestrate o interrotte come NetNut o IPIDEA. Questa è la conferma del provider, non un controllo che facciamo su ogni dispositivo; la pagina sourcing elenca i suoi limiti. I sequestri del 2026 hanno mostrato cosa c’è in gioco: a gennaio Google ha avviato azioni legali contro domini IPIDEA, e a luglio FBI e IRS-CI hanno sequestrato domini NetNut, dopo che Google ha segnalato dispositivi inseriti in queste reti senza il consenso dei proprietari. Chiedi a qualsiasi provider, noi inclusi, da dove provengono i loro IP prima di costruire un flusso su di essi.