Rotierende Residential Proxy API fürs Web Scraping

Wie funktioniert die Residential Proxy API?

Du sendest jede Anfrage an ein Gateway, welches sie über eine Residential IP weiterleitet, die zum gesendeten Benutzernamen passt. Es gibt keine IP-Liste zum Herunterladen und keinen Rotationscode zu schreiben.

1. Authentifiziere dich mit dem Benutzernamen und Passwort deines Plans oder Sub-Benutzers oder von einer erlaubten IP.
2. Wähle den Exit durch Hinzufügen von Parametern zum Benutzernamen: -country-de, -city-berlin, oder für die USA -state-ny und -zip-10001; -asn-7922 wählt einen Internetprovider ohne zusätzliche Kosten aus. Die Stadtverfügbarkeit variiert.
3. Wähle die Session: ohne Session-ID erhält jede neue Verbindung eine IP aus dem Pool, normalerweise eine andere; -session-<id>-ttl-<minutes> hält eine IP bis zu 30 Minuten fest, wobei die IP früher wechseln kann.

Der gleiche Benutzername funktioniert auf dem HTTP-Port (7777) und dem SOCKS5-Port (7778). HTTPS-Websites werden über einen CONNECT Tunnel geleitet, sodass TLS zwischen deinem Client und der Webseite läuft.

import requests

GATEWAY = "gw.crawlrelay.com:7777"


def proxy(username, password):
    url = "http://%s:%s@%s" % (username, password, GATEWAY)
    return {"http": url, "https": url}


# Rotating: each new connection usually exits through a different residential IP in Germany
r = requests.get("https://api.ipify.org", proxies=proxy("USERNAME-country-de", "PASSWORD"), timeout=(10, 30))
print("rotating exit:", r.text)

# Sticky: the same IP for up to 30 minutes, across connections (it can change earlier)
sticky = proxy("USERNAME-country-de-city-berlin-session-crawl42-ttl-30", "PASSWORD")
for _ in range(3):
    print("sticky exit:", requests.get("https://api.ipify.org", proxies=sticky, timeout=(10, 30)).text)

Rotierend oder fest: Welche Session sollte ein Scraper nutzen?

Rotieren für unabhängige Seiten; festhalten bei Abläufen. Ein Crawler, der tausende unabhängige Produkt- oder Artikelseiten lädt, sollte für jede Seite eine neue Verbindung ohne Session-ID öffnen, um die Last auf viele Residential-Proxys zu verteilen. Ein Ablauf, dessen nächster Schritt vom vorherigen abhängt, z.B. Pagination mit einem Cursor, der an ein Cookie gebunden ist, sollte eine feste Session nutzen, bis der Ablauf endet.

Die Rotation erfolgt pro neuer Verbindung, nicht pro HTTP-Anfrage. Ein Client, der eine Verbindung offen hält, nutzt denselben Exit für alle Anfragen darauf. Der Sessions-Leitfaden zeigt, wie man das bei requests, httpx, Scrapy und Playwright steuert.

Welche Erfolgsrate ist mit Residential-Proxys zu erwarten?

Erwarte eine hohe Verbindungsrate und eine niedrigere Erfolgsrate bei geschützten Zielen und messe beides. Proxyway's Proxy Market Research 2026 testete 13 Anbieter: Das mittlere residential Netzwerk beantwortete 99,28 % der Anfragen, aber nur 74,43 % der Anfragen an echte Ziele wie Amazon, Google und Instagram waren erfolgreich.

Die Differenz ist die Filterung des Ziels selbst, die kein Proxy umgeht. Wir veröffentlichen keine eigenen Erfolgsraten, bevor wir mit einer klar definierten Methode gemessen haben. Vergleiche Anbieter anhand der Kosten pro erfolgreicher Anfrage für deine Ziele: Sende dieselben 1.000 URLs durch jeden Anbieter, zähle nutzbare Antworten und teile die Traffic-Kosten durch diese Zahl.

Woher stammen die Residential-Proxys?

Von etablierten Partnernetzwerken. CrawlRelay betreibt kein eigenes Geräte-Netzwerk: Es verkauft IPs von etablierten Upstream-Partnernetzwerken weiter. Unser Upstream-Anbieter bestätigt, dass Gerätebesitzer zustimmen und sich abmelden können, und dass das Angebot nicht aus beschlagnahmten oder gestörten Netzwerken wie NetNut oder IPIDEA stammt. Das ist die Bestätigung des Anbieters, keine Überprüfung, die wir bei jedem Gerät machen; die Beschaffungsseite listet deren Grenzen auf. Die Beschlagnahmungen 2026 zeigten, was auf dem Spiel steht: Im Januar ergriff Google rechtliche Maßnahmen gegen IPIDEA-Domains, und im Juli beschlagnahmten FBI und IRS-CI NetNuts Domains, nachdem Google meldete, dass Geräte ohne Wissen ihrer Besitzer diesen Netzwerken beigetreten waren. Fragen Sie jeden Anbieter, auch uns, woher dessen IPs kommen, bevor Sie darauf eine Pipeline aufbauen.