← Entdecken
GitHub · unclecode/crawl4ai↑ +154 heute

Bereiten Sie Webdaten für KI vor

Crawl4AI; ist ein Open-Source-Webcrawler und -Scraper, der für große Sprachmodelle optimiert ist. Es konvertiert Webseiten in saubere und strukturierte Formate (Markdown usw.), die Modelle der künstlichen Intelligenz problemlos verarbeiten können.

Aktualisierungen

  • 14. Oktober 2026: Sterne 84,312 → 85,514, neueste Version v0.9.5 (14. Oktober 2026).
  • 27. September 2026: Sterne 80,563 → 84,312, neueste Version v0.9.4 (23. September 2026).
  • 31. August 2026: Sterne 75,853 → 80,563, neueste Version v0.9.3 (31. August 2026).
  • 2. August 2026: Sterne 67,194 → 75,853, neueste Version v0.9.2 (15. Juli 2026).

Was es bringt

  • Es konvertiert Webinhalte in ein sauberes und KI-freundliches Format.
  • Speziell optimiert für LLM-Prozesse.
  • Es ist schnell und Open Source.

Installation

Mit pip (PyPI)
pip install crawl4ai

Ausführung

Webseite scannen und für KI vorbereiten
crawl4ai-download

Installation (einzelner Befehl)

Fügen Sie dies in Ihren Agenten ein (Claude Code · Codex · Antigravity)

Helfen Sie mir, den Open-Source-Webcrawler Crawl4AI zu installieren; Versuchen wir es, indem wir es mit „pip install -U crawl4ai“ installieren, dann „crawl4ai-setup“ ausführen und eine Webseite mit dem Befehl „crwl https://www.nbcnews.com/business -o markdown“ in LLM-freundliches Markdown konvertieren.

Repository: https://github.com/unclecode/crawl4ai. Richte dich bei der Installation und Ausführung nach den offiziellen Anweisungen in der README-Datei dieses Repositorys.

Prüfe vor dem Start, unter welchem Betriebssystem wir arbeiten und ob die notwendigen Tools (z. B. Python, Node.js, Git, Docker) installiert sind. Installiere fehlende Tools schrittweise entsprechend diesem System.

Erstelle einen neuen, leeren Ordner für die Arbeit. Rühre keine Dateien außerhalb dieses Ordners an und lösche nichts. Sag mir vor jedem Befehl in einem Satz, was du tun wirst.

Sag mir, was ich am Ende jedes Schrittes auf dem Bildschirm sehen sollte. Wenn ein Fehler auftritt, füge ich die Fehlermeldung exakt so ein, wie sie ist, und wir beheben sie gemeinsam.

Verwandte Begriffe aus dem Glossar

Für wen es gedacht istWeb-Datensammler für KI/Daten
SchwierigkeitMittel · Python
Was bietetLLM-freundliches Web-Crawl + Scrape
VoraussetzungPython
GebührKostenlos · Open Source (Apache-2.0)
Lizenz: Apache-2.0 · Sie können es frei verwenden, ändern und kommerziell nutzen (einschließlich Patentschutz).

Links

TreScout hat dieses Werkzeug nicht entwickelt · wir haben es in den GitHub-Trends gefunden und stellen es vor. Diese Seite beschreibt das Repository so, wie es am 2026-05-29 war: Die Anzahl der Sterne und unser Text stammen von diesem Tag, das Repository kann sich seitdem geändert haben. Den aktuellen Stand finden Sie über den Link zum Repository. Der Präsentationstext wurde mit KI aus der eigenen Dokumentation des Repositories erstellt und diese Seite wurde maschinell übersetzt aus dem türkischen Original · maßgeblich ist die türkische Fassung.