Glossar · DataZuletzt aktualisiert: 3. Juni 2026

Was ist Web Scraping?

Softwareprozess, der mithilfe automatischer Methoden Daten von Websites sammelt und aufzeichnet.

Definition

Beim Web Scraping werden Daten von Websites durch automatische Software erfasst und in einem strukturierten Format gespeichert. Es wird zum Sammeln großer Datenmengen verwendet, die nicht manuell kopiert und eingefügt werden können.

Analogie: Es ist, als ob ein Roboter in Sekundenschnelle alle Seiten scannt und in eine Tabelle umwandelt, anstatt die Informationen in Tausenden von Büchern in einer Bibliothek manuell zu notieren.

So funktioniert es

Eine Software verbindet sich wie ein Browser mit der Zielwebsite, liest die Codes der Seite, extrahiert die gewünschten Daten (Preise, Titel usw.) und überträgt sie in eine Datei.

Wo es eingesetzt wird

Preisvergleichsseiten werden verwendet, um Datensätze zu sammeln, die für die Marktforschung und das Training von Modellen der künstlichen Intelligenz benötigt werden.

Häufig verwechselt mit

Es wird mit Web-Crawling verwechselt, aber während Crawling zum Indexieren von Websites verwendet wird, dient Scraping dazu, bestimmte Daten zu extrahieren und sie zu verstehen.

Häufige Fragen

Kann jede Website gescrapt werden?

Technisch gesehen ja, aber es ist ethisch und rechtlich wichtig, die Nutzungsbedingungen der Websites und die Robots-Blockierungsdateien (robots.txt) zu beachten.

Ist Web Scraping schwierig?

Für einfache Websites ist dies recht einfach, für moderne und sichere Websites sind jedoch fortgeschrittene technische Kenntnisse erforderlich.