Ist Web Scraping 2026 legal? Was Scraper wissen müssen

Welche Gesetze können für einen Web-Scraper gelten?

Stellen Sie bei jedem Projekt fünf Fragen:

1. Zugang. Haben Sie eine Anmeldung, Paywall oder andere Sperre überwunden? Computer-Missbrauchsgesetze prüfen die Autorisierung; öffentliche Seiten werden anders behandelt als geschützte.
2. Umgehung. Haben Sie eine technische Maßnahme wie ein Anti-Bot-System umgangen? In den USA wird seit 2026 Abschnitt 1201 des DMCA gegen Scraper getestet.
3. Vertrag. Haben Sie die Bedingungen der Seite akzeptiert, z. B. durch Kontoerstellung? Ein Verstoß kann ein Vertragsanspruch sein, selbst wenn der Zugang legal war.
4. Inhalt. Kopieren Sie geschützten Text, Bilder oder eine Datenbank? Urheberrecht und in der EU das Datenbankrecht schützen mehr als Fakten.
5. Personen. Identifizieren die Daten Personen? Dann gelten Datenschutzgesetze wie die GDPR oder US-Bundesstaaten-Gesetze, egal ob öffentlich oder nicht.

Wie ist die Rechtslage in den Vereinigten Staaten?

• Computer Fraud and Abuse Act. Nach der Entscheidung des Supreme Courts in Van Buren (2021) entschied der Ninth Circuit in hiQ v. LinkedIn (April 2022), dass das Scrapen öffentlich verfügbarer Daten kein unautorisierter Zugriff ist. Dass hiQ dennoch gegen die Nutzungsbedingungen verstoßen habe, wurde festgestellt und es gab eine Einigung.
• Nutzungsbedingungen. Im Fall Meta v. Bright Data (N.D. Cal., Januar 2024) urteilte das Gericht, dass Metas Bedingungen das Scrapen öffentlicher Daten ohne Anmeldung nicht verboten; Meta zog die Klage zurück. Klagen von X Corp gegen Bright Data wurden im Mai 2024 abgewiesen und später beigelegt.
• Anti-Umgehung. Zwei Fälle 2026 testen, ob das Überwinden eines Anti-Bot-Systems Abschnitt 1201 des DMCA verletzt. In Google v. SerpApi wurde die erste Klage Juli 2026 abgewiesen, eine geänderte ist anhängig. In Reddit v. SerpApi, Oxylabs, AWMProxy und Perplexity wurden Anträge zur Abweisung am 31. Juli 2026 weitgehend abgelehnt; Oxylabs' Antrag war im Oktober 2026 noch offen. Kein Beklagter wurde für haftbar befunden, die Gerichte haben noch nicht entschieden.
• Urheberrecht und KI. Im September 2026 entschied der Third Circuit in Thomson Reuters v. Ross, dass das Training eines nicht-generativen juristischen Recherchetools mit Westlaw-Überschriften keine zulässige Nutzung ist.

Wie ist die Rechtslage in der EU und im Vereinigten Königreich?

• Text und Data Mining. EU-Urheberrecht erlaubt das Mining von rechtmäßig zugänglichen Inhalten, sofern der Rechteinhaber diese Nutzung nicht reserviert hat, bei maschinenlesbarem Vorbehalt für Online-Inhalte. Im Fall Kneschke gegen LAION (Dezember 2025) entschied das Oberlandesgericht Hamburg, dass LAION, ein nicht-kommerzieller Forschungsverband, sich auf die wissenschaftliche TDM-Ausnahme berufen darf und eine in Umgangssprache formulierte Vorbehaltsklausel mit 2021 verfügbarer Technik nicht maschinenlesbar war. Diese Entscheidung kann sich mit der Technik weiterentwickeln; eine weitere Berufung beim Bundesgerichtshof (BGH) wurde zugelassen. Kommerzielle Crawler sollten heute klare Vorbehalte in den Nutzungsbedingungen beachten.
• AI-Gesetz. Anbieter allgemeiner KI-Modelle müssen eine Richtlinie haben, um solche Vorbehalte zu erkennen und zu respektieren (Artikel 53). Der Verhaltenskodex 2025 verpflichtet Unterzeichner, Crawlern zu folgen, die robots.txt einhalten.
• Datenbankrecht. Das EU-sui generis-Datenbankrecht schützt wesentliche Investitionen in Datenbanken. Der EuGH entschied in CV-Online Latvia gegen Melons (2021), dass die Wiederverwendung einer Datenbank dieses Recht verletzen kann, wenn die Investition geschädigt wird.
• Personenbezogene Daten. Die GDPR gilt auch für öffentliche personenbezogene Daten. Die EDPB-Stellungnahme 28/2024 sagt, dass berechtigtes Interesse eine Rechtsgrundlage für KI-Entwicklung sein kann – fallabhängig; die französische CNIL gab im Juni 2025 Empfehlungen zum Scraping für KI heraus.
• Vereinigtes Königreich. Im Fall Getty Images gegen Stability AI (November 2025) lehnte das High Court die sekundäre Urheberrechtsforderung gegen das Modell ab; Getty wurde eine Berufung erlaubt.

Wie verringere ich das rechtliche Risiko bei einem Scraping-Projekt?

• Nur öffentliche Seiten verwenden. Kein Login, keine Paywalls, keine Accounts, die Ihnen nicht gehören.
• Robots.txt und AI-Opt-Outs respektieren. RFC 9309 befolgen, ai-train=no-ähnliche Signale für Trainingsdaten beachten und dokumentieren, was und wann Sie überprüft haben.
• Nicht umgehen. Kein CAPTCHA Lösen, keine Werkzeuge zur Bot-Erkennung-Umgehung, keine Wiederholungsversuche, um eine Ablehnung zu umgehen. Siehe wie man auf 403, 429 und CAPTCHAs reagiert.
• Lesen Sie die Nutzungsbedingungen der Seiten, auf die Sie angewiesen sind, besonders wenn Sie dort einen Account haben.
• Personenbezogene Daten minimieren, Ihre Rechtsgrundlage dokumentieren und eine Möglichkeit zur Achtung von Widersprüchen bereithalten.
• Nutzen Sie die gesammelten Daten fair: Fakten und Analysen sind rechtlich sicherer als das vollständige Veröffentlichen ganzer Texte oder Bilder.
• Behalten Sie Aufzeichnungen: URLs, Daten, robots.txt-Versionen und die Identität Ihres Crawlers.

Bei tatsächlichem Risiko sollten Sie einen Anwalt in den beteiligten Ländern konsultieren.

Verändert die Nutzung eines Proxys die Rechtmäßigkeit des Scrapings?

Nein. Ein Residential Proxy ändert nur, von wo aus Ihre Anfrage scheinbar kommt; es ändert nicht, was oder wie Sie sammeln. Die gleichen fünf Fragen gelten mit oder ohne Proxy. Zwei Dinge ändern sich jedoch: Erstens die Regeln Ihres Proxy-Anbieters: CrawlRelay's Acceptable Use Policy erlaubt nur öffentliche Daten und verbietet Umgehung und Betrug. Zweitens die Herkunft der IP-Adressen: Im Jahr 2026 haben Google und US-Behörden die IPIDEA- und NetNut-Netzwerke mit Geräten ohne ordnungsgemäße Zustimmung gestört; fragen Sie also, woher die IPs eines Anbieters stammen. Unsere sind auf der Sourcing-Seite aufgeführt.