API proxy résidentiel rotatif pour le web scraping

Comment fonctionne l'API proxy résidentiel ?

Vous envoyez chaque requête vers une passerelle unique, qui la relaie via une IP résidentielle correspondant au nom d'utilisateur que vous avez envoyé. Il n'y a pas de liste d'IPs à télécharger ni de code de rotation à écrire.

1. Authentifiez-vous avec le nom d'utilisateur et le mot de passe de votre forfait ou d'un sous-utilisateur, ou depuis une IP autorisée.
2. Choisissez la sortie en ajoutant des paramètres au nom d'utilisateur : -country-de, -city-berlin, ou pour les États-Unis -state-ny et -zip-10001; -asn-7922 sélectionne un fournisseur internet sans coût supplémentaire. La disponibilité par ville varie.
3. Choisissez la session : sans ID de session, chaque nouvelle connexion obtient une IP du pool, généralement différente ; -session-<id>-ttl-<minutes> conserve une IP jusqu'à 30 minutes, mais elle peut changer plus tôt.

Le même nom d'utilisateur fonctionne sur le port HTTP (7777) et le port SOCKS5 (7778). Les sites HTTPS passent par un tunnel CONNECT, donc le TLS se déroule entre votre client et le site.

import requests

GATEWAY = "gw.crawlrelay.com:7777"


def proxy(username, password):
    url = "http://%s:%s@%s" % (username, password, GATEWAY)
    return {"http": url, "https": url}


# Rotating: each new connection usually exits through a different residential IP in Germany
r = requests.get("https://api.ipify.org", proxies=proxy("USERNAME-country-de", "PASSWORD"), timeout=(10, 30))
print("rotating exit:", r.text)

# Sticky: the same IP for up to 30 minutes, across connections (it can change earlier)
sticky = proxy("USERNAME-country-de-city-berlin-session-crawl42-ttl-30", "PASSWORD")
for _ in range(3):
    print("sticky exit:", requests.get("https://api.ipify.org", proxies=sticky, timeout=(10, 30)).text)

Sessions rotatives ou collantes : laquelle un scraper doit-il utiliser ?

Utilisez la rotation pour les pages indépendantes ; restez collant pour les flux. Un crawler qui récupère des milliers de pages produits ou articles sans rapport doit ouvrir une nouvelle connexion par page, sans ID de session, pour répartir la charge sur plusieurs IP résidentielles. Un flux dont l'étape suivante dépend de la précédente, comme une pagination avec un curseur lié à un cookie, doit garder une session collante jusqu’à la fin du flux.

La rotation s’effectue à chaque nouvelle connexion, pas à chaque requête HTTP. Un client qui maintient une connexion ouverte conserve la même sortie pour toutes les requêtes sur cette connexion. Le guide des sessions explique comment gérer cela avec requests, httpx, Scrapy et Playwright.

Quel taux de réussite attendre des proxies résidentiels ?

Attendez-vous à un taux de connexion élevé et un taux de réussite plus faible sur les cibles protégées, et mesurez-les tous les deux. Proxyway's Proxy Market Research 2026 a testé 13 fournisseurs : le réseau résidentiel médian a répondu à 99,28 % des requêtes, mais seulement 74,43 % des requêtes vers des cibles réelles telles qu’Amazon, Google et Instagram ont réussi.

L’écart correspond au filtrage propre à la cible, qu’aucun proxy ne supprime. Nous ne publions aucun chiffre de réussite tant que nous n'en avons pas mesuré un via une méthode déclarée. Comparez les fournisseurs sur le coût par requête réussie pour vos propres cibles : lancez les mêmes 1 000 URLs sur chacun, comptez les réponses exploitables, puis divisez le coût du trafic par ce total.

D'où viennent les IPs résidentiels ?

Des réseaux partenaires établis. CrawlRelay ne gère pas son propre réseau d'appareils : il revend des IPs issues de réseaux partenaires en amont reconnus. Notre fournisseur en amont confirme que les propriétaires des appareils ont donné leur consentement et peuvent se rétracter, et que son approvisionnement ne provient pas de réseaux saisis ou perturbés tels que NetNut ou IPIDEA. C’est la confirmation du fournisseur, pas un contrôle que nous effectuons sur chaque appareil ; la page d'approvisionnement liste ses limites. Les saisies de 2026 ont montré l’enjeu : en janvier, Google a engagé une action légale contre les domaines d’IPIDEA, et en juillet le FBI et l’IRS-CI ont saisi les domaines de NetNut, après que Google a signalé que des appareils avaient rejoint ces réseaux à l’insu de leurs propriétaires. Demandez à n’importe quel fournisseur, y compris nous, d’où proviennent ses IPs avant de bâtir une pipeline dessus.