Roterende residentiële proxy API voor webscraping

Hoe werkt de API voor residentiële proxy's?

Je stuurt elke aanvraag naar één gateway, en die stuurt het door via een residentieel IP-adres dat hoort bij de gebruikersnaam die je hebt gestuurd. Er is geen lijst met IP's om te downloaden en geen rotatiecode om te schrijven.

1. Authenticeer met de gebruikersnaam en het wachtwoord van je abonnement of van een subgebruiker, of vanaf een toegestane IP.
2. Kies de exit door parameters toe te voegen aan de gebruikersnaam: -country-de, -city-berlin, of voor de Verenigde Staten -state-ny en -zip-10001; -asn-7922 kiest een internetprovider zonder extra kosten. Beschikbaarheid van steden varieert.
3. Kies de sessie: zonder sessie-ID krijgt elke nieuwe verbinding een IP uit de pool, meestal een ander; -session-<id>-ttl-<minutes> houdt één IP tot 30 minuten vast, hoewel het IP eerder kan wisselen.

Dezelfde gebruikersnaam werkt op de HTTP-poort (7777) en SOCKS5-poort (7778). HTTPS-sites gaan via een CONNECT tunnel, zodat TLS loopt tussen je client en de website.

import requests

GATEWAY = "gw.crawlrelay.com:7777"


def proxy(username, password):
    url = "http://%s:%s@%s" % (username, password, GATEWAY)
    return {"http": url, "https": url}


# Rotating: each new connection usually exits through a different residential IP in Germany
r = requests.get("https://api.ipify.org", proxies=proxy("USERNAME-country-de", "PASSWORD"), timeout=(10, 30))
print("rotating exit:", r.text)

# Sticky: the same IP for up to 30 minutes, across connections (it can change earlier)
sticky = proxy("USERNAME-country-de-city-berlin-session-crawl42-ttl-30", "PASSWORD")
for _ in range(3):
    print("sticky exit:", requests.get("https://api.ipify.org", proxies=sticky, timeout=(10, 30)).text)

Roteren of sticky: welke sessie moet een scraper gebruiken?

Rotateer voor onafhankelijke pagina's; blijf sticky voor flows. Een crawler die duizenden niet-gerelateerde product- of artikelpagina's ophaalt opent per pagina een nieuwe verbinding zonder sessie-ID, zodat de load verdeeld wordt over veel residentiële IP's. Een flow waarvan de volgende stap afhangt van de vorige, zoals paginering met een cursor gekoppeld aan een cookie, houdt één sticky sessie vast tot de flow eindigt.

Rotatie gebeurt per nieuwe verbinding, niet per HTTP-aanvraag. Een client die één verbinding openhoudt gebruikt dezelfde exit voor elke aanvraag daarop. De sessions guide toont hoe je dit controleert in requests, httpx, Scrapy en Playwright.

Welke slagingskans kan ik verwachten van residentiële proxy's?

Verwacht een hoge verbindingskans en een lagere slagingskans bij beschermde doelen, meet beide. Proxyway's Proxy Market Research 2026 testte 13 providers: het mediane residentiële netwerk beantwoordde 99,28% van de aanvragen, maar slechts 74,43% van de aanvragen aan echte doelen zoals Amazon, Google en Instagram slaagde.

Het verschil is eigen filtering van het doel, die geen enkele proxy wegneemt. Wij publiceren geen eigen slagingspercentage voordat we er één hebben gemeten volgens een aangegeven methode. Vergelijk providers op kosten per succesvolle aanvraag voor je eigen doelen: voer dezelfde 1.000 URL's door elke provider, tel bruikbare responsen en deel de dataverkeer-kosten door dat aantal.

Waar komen de residentiële IP's vandaan?

Van gevestigde partnernetwerken. CrawlRelay runt geen eigen apparaten netwerk: het verkoopt IP's door die van gevestigde upstream partnernetwerken komen. Onze upstreamprovider bevestigt dat apparateigenaren toestemming geven en kunnen intrekken, en dat de levering niet afkomstig is van in beslag genomen of verstoorde netwerken zoals NetNut of IPIDEA. Dit is de bevestiging van de provider, geen controle die wij op elk apparaat uitvoeren; de sourcing pagina vermeldt de limieten. De takedowns van 2026 bewezen wat er op het spel staat: in januari startte Google een juridische actie tegen IPIDEA-domeinen, en in juli namen FBI en IRS-CI NetNut's domeinen in beslag, nadat Google had gemeld dat apparaten zonder medeweten van de eigenaars aan deze netwerken waren verbonden. Vraag elke provider, ook ons, waar hun IP's vandaan komen voordat je er een pipeline op bouwt.