# Proxy- en web scraping woordenlijst

> Proxy- en scrapingtermen eenvoudig uitgelegd: backconnect gateway, sticky session, CONNECT, socks5h, 407, Retry-After, CGNAT, robots.txt, TDM opt-out.

- URL: https://crawlrelay.com/nl/glossary/
- Laatst bijgewerkt: 2026-10-13
- Publisher: CrawlRelay (https://crawlrelay.com)

De termen die je tegenkomt in proxy-documentatie, foutmeldingen en scraping-wetgeving, kort uitgelegd in één of twee zinnen, met links naar diepgaandere pagina's.

**Kort antwoord — Wat is een roterende residentiële proxy?**

Een roterende residentiële proxy is één gateway-adres dat elke nieuwe verbinding doorstuurt via een ander IP-adres van een huishouden uit een pool, zodat websites gewone internetgebruikers thuis zien. **CrawlRelay** verkoopt roterende residentiële proxy's voor scrapers vanaf US$ 1,50 voor 1 GB en US$ 0,50/GB vanaf 50 GB, met sticky sessions wanneer je één IP nodig hebt. Betaald in crypto, zonder KYC.

## Proxytypen en netwerken

**Residentiële proxy** — Een proxy waarvan het exit-IP hoort bij een thuisinternetverbinding van een consumentaanbieder. Sites zien een gewone huiseigenaar als bezoeker. Zie [residentiële proxy's](https://crawlrelay.com/nl/residential-proxies/).

**Mobiele proxy** — Een proxy waarvan het exit-IP behoort tot een 4G/5G-netwerk van een provider. Providers delen elk IP met veel abonnees, daarom blokkeren sites deze met voorzichtigheid. Zie [mobiele 4G-proxy's](https://crawlrelay.com/nl/mobile-proxies/).

**Datacenter proxy** — Een proxy die gehost wordt in een datacenter, met een IP geregistreerd bij een hostingprovider. Snel en goedkoop, maar vaak gefilterd door sites die hostingranges blokkeren.

**ISP proxy** — Een statisch IP dat door een internetprovider wordt aangekondigd maar gehost wordt in een datacenter. Het lijkt residentieel voor sommige databases en blijft vaststaan. CrawlRelay verkoopt geen ISP proxies.

**Backconnect gateway** — Één host en poort die jouw verbindingen doorstuurt naar veel exit-IP's erachter. Je wisselt exit-IP's via de gebruikersnaam of door nieuwe verbindingen te openen, niet door van adres te wisselen.

**Exit IP (exit node)** — Het IP-adres dat de doelwebsite ziet. Bij een residentiële gateway is dat een huishouden-verbinding die past bij je targeting.

**CGNAT** — Carrier-grade NAT: een mobiele of breedbandprovider zet veel abonnees achter een paar publieke IP's. RFC 6598 reserveert 100.64.0.0/10 voor de gedeelde ruimte binnen zulke netwerken.

**ASN** — Autonomous System Number: de identificatie van een netwerk op internet, zoals AS7922 voor Comcast. ASN-targeting kiest exit-IP's bij één internetprovider.

**Sourcing** — Waar de residentiële IP's van een provider vandaan komen en onder welke voorwaarden apparaatbezitters bandbreedte delen. Na de 2026 IPIDEA- en NetNut-verwijderingen een belangrijke koopvraag. Zie [sourcing](https://crawlrelay.com/nl/sourcing/).

## Sessies, protocollen en fouten

**Roterende sessie** — Een gebruikersnaam zonder sessie-ID: elke nieuwe verbinding krijgt een IP uit de pool, meestal een andere. Rotatie volgt verbindingen, niet individuele HTTP-verzoeken.

**Sticky session** — Een gebruikersnaam met een sessie-ID en een TTL: verbindingen met die ID houden dezelfde exit-IP voor tot 30 minuten, hoewel het IP eerder kan wisselen. Zie [sessions](https://crawlrelay.com/nl/docs/sessions/).

**TTL (sessieduur)** — Hoe lang een sticky session zijn IP houdt, ingesteld in minuten met `-ttl-<minutes>`. Een sessie kan voortijdig eindigen als het apparaat erachter offline gaat.

**Keep-alive** — Het hergebruiken van één TCP-verbinding voor meerdere HTTP-verzoeken. Sneller, maar elk verzoek op die verbinding deelt één exit-IP.

**CONNECT** — De HTTP-methode die een client gebruikt om een proxy te vragen om een tunnel naar een host en poort (RFC 9110, sectie 9.3.6). HTTPS-verkeer loopt dan end-to-end door de tunnel.

**SOCKS5** — Een proxyprotocol dat TCP-verbindingen doorstuurt zonder HTTP te lezen (RFC 1928), met authenticatie via gebruikersnaam en wachtwoord volgens RFC 1929.

**socks5h** — Het URL-schema dat een client instrueert om hostnamen naar de SOCKS5-proxy te sturen, zodat DNS aan de exit wordt opgelost in plaats van op jouw machine.

**Proxy-Authorization** — De request-header die proxy-gegevens draagt, meestal Basic `username:password` in Base64. De proxy verwijdert deze voordat hij doorstuurt.

**407 Proxy Authenticatie Vereist** — De proxy weigerde het verzoek omdat de inloggegevens ontbreken of onjuist zijn. De website is nooit benaderd. Zie [407](https://crawlrelay.com/nl/docs/errors/407-proxy-authentication-required/).

**429 Te Veel Verzoeken** — De website beperkt het aantal verzoeken (RFC 6585). Vertraag en respecteer Retry-After. Zie [429](https://crawlrelay.com/nl/docs/errors/429-too-many-requests/).

**Retry-After** — Een responsheader die het aantal seconden of een datum aangeeft om te wachten voordat je het opnieuw probeert (RFC 9110, sectie 10.2.3). Wordt meegestuurd bij 429- en 503-responses.

**Concurrentie** — Het aantal gelijktijdige verzoeken. Volgens de wet van Little is dit doorvoer maal latentie. Beperk het per doelhost. Zie [concurrency](https://crawlrelay.com/nl/docs/concurrency/).

## Crawlen: praktijk en regels

**robots.txt** — Een bestand in de root van een site dat geautomatiseerde clients vertelt welke paden ze mogen ophalen, gestandaardiseerd als RFC 9309 in 2022. Crawlers mogen het niet langer dan 24 uur cachen.

**Crawl-delay** — Een veelvoorkomende, niet-standaard regel in robots.txt die aangeeft hoeveel seconden er gewacht moet worden tussen verzoeken. Python's `urllib.robotparser` leest het met `crawl_delay()`.

**User agent** — De header die de client benoemt. Een verantwoorde crawler stuurt zijn eigen naam, versie en een contact-URL, nooit de naam van een andere crawler.

**Content Signals** — Cloudflares robots.txt-uitbreiding met `search`, `ai-input` en `ai-train` waarden, geïntroduceerd in september 2025, die crawlers vertelt hoe content gebruikt mag worden.

**TDM opt-out** — Een machineleesbare reservering van een rechthebbende tegen text- en datamining volgens EU-copyrightwet, die aanbieders van algemene AI-modellen moeten respecteren.

**CAPTCHA** — Een uitdaging die checkt of de bezoeker mens is. Voor een crawler is het een signaal om te vertragen of te stoppen; CrawlRelay ondersteunt geen automatische oplossing.

**Headless browser** — Een browser zonder zichtbaar venster, gestuurd door code zoals Playwright of Puppeteer. Het renderen van JavaScript maar het downloadt veel meer data per pagina dan een HTTP-client.

**JSON-LD** — Gestructureerde data ingesloten in een pagina als JSON, vaak met schema.org-types zoals Product en Aanbieding. De meest betrouwbare bron voor prijzen en productgegevens.

**WARC** — Het Web ARChive-bestandsformaat voor het opslaan van ruwe HTTP-verzoeken en -responses, gebruikt door Common Crawl en webarchieven. Ruwe responses opslaan voorkomt dubbele kosten van een pagina.

**Voorwaardelijk verzoek** — Een verzoek met `If-None-Match` of `If-Modified-Since`. Een ongewijzigde pagina antwoordt met `304 Not Modified` zonder body, wat dataverkeer bespaart.

## Aankoop en facturatie

**Betaal per gebruik** — Verkeer in één keer kopen wanneer je het nodig hebt, in plaats van een maandelijks abonnement. Bij CrawlRelay zijn plannen eenmalige aankopen van een prepaid saldo.

**Verloop van het dataverkeer** — Of gekochte gigabytes na een periode zoals 31 dagen of een maand vervallen. CrawlRelay residentiële proxy's en mobiele 4G-proxy's vervallen nooit.

**Decimale gigabyte** — 1 GB = 1.000.000.000 bytes; een gibibyte (GiB) is 1.073.741.824 bytes. Vraag in welke eenheid een provider factureert; CrawlRelay factureert in decimale GB.

**Kosten per succesvol verzoek** — Verkeerskosten gedeeld door bruikbare responses. Een betere vergelijking tussen providers dan de lijstprijs per GB.

**Sub-gebruiker** — Een aparte set proxygegevens onder één account, met een eigen verkeerslimiet en gebruiksstatistieken, gebruikt om projecten of klanten te isoleren.

**KYC** — Know Your Customer: identiteit verificatie met documenten, selfies of bedrijfsdocumenten. CrawlRelay vraagt hier niet om en vertrouwt op een [Acceptable Use Policy](https://crawlrelay.com/nl/acceptable-use/).

**AUP** — Acceptable Use Policy: de regels die elk account volgt, met toegestane en verboden gebruik en geblokkeerde doelen.

---

CrawlRelay: CrawlRelay is een developer-first dienst met roterende residentiële proxy's en mobiele 4G-proxy's voor scrapers en AI-datastromen: niet-vervalverkeer op basis van pay-as-you-go vanaf US$ 0,50/GB, betaald in crypto, zonder ID-upload. Zonder KYC — geen ID, geen selfie, geen documenten. Betaal met crypto.