Training der künstlichen Intelligenz bei geringem Gedächtnis
Soup ist eine Python-Bibliothek, die die Feinabstimmung großer Sprachmodelle über eine einzige YAML-Datei ermöglicht. Es kann Modelle mit 8 Milliarden Parametern mithilfe der Layer-Streaming-Methode auf Laptop-Grafikprozessoren mit 4 GB Speicher trainieren.
Aktualisierungen
- 15. Oktober 2026: Sterne 8,615 → 9,069, neueste Version v0.76.1 (14. Oktober 2026).
- 12. Oktober 2026: Sterne 7,988 → 8,615, neueste Version v0.76.0 (12. Oktober 2026).
- 2. Oktober 2026: Sterne 7,309 → 7,988, neueste Version v0.75.2 (1. Oktober 2026).
- 27. September 2026: Sterne 6,267 → 7,309, neueste Version v0.75.1 (21. September 2026).
Was es bringt
- Auf Laptops mit 4 GB Grafikspeicher können Sie Modelle mit 8 Milliarden Parametern trainieren.
- Mit der Layer-Flow-Methode müssen Sie sich nicht mit komplexen Installationen auseinandersetzen, indem Sie Hardwarebeschränkungen überwinden.
- Sie können den gesamten Trainingsprozess über eine einzige Konfigurationsdatei verwalten.
Installation
pip install "soup-cli[train]"pip install "soup-cli[all]"Ausführung
soup init --template chat
soup trainWenn Sie nicht programmieren
Ich möchte mithilfe der Soup-Bibliothek auf meinem Computer mit 4 GB Grafikspeicher ein Modell der künstlichen Intelligenz mit 8 Milliarden Parametern trainieren. Helfen Sie mir, eine YAML-Konfigurationsdatei zu erstellen, die Layer-Streaming ermöglicht und 4-Bit-Quantisierung verwendet. Bereiten Sie den Inhalt der Datei „soup.yaml“ vor, die zum Starten des Trainingsprozesses erforderlich ist, und erklären Sie dann Schritt für Schritt, wie Sie das Training mithilfe dieser Datei starten.
Repository: https://github.com/MakazhanAlpamys/Soup. Richte dich bei der Installation und Ausführung nach den offiziellen Anweisungen in der README-Datei dieses Repositorys.
Prüfe vor dem Start, unter welchem Betriebssystem wir arbeiten und ob die notwendigen Tools (z. B. Python, Node.js, Git, Docker) installiert sind. Installiere fehlende Tools schrittweise entsprechend diesem System.
Erstelle einen neuen, leeren Ordner für die Arbeit. Rühre keine Dateien außerhalb dieses Ordners an und lösche nichts. Sag mir vor jedem Befehl in einem Satz, was du tun wirst.
Sag mir, was ich am Ende jedes Schrittes auf dem Bildschirm sehen sollte. Wenn ein Fehler auftritt, füge ich die Fehlermeldung exakt so ein, wie sie ist, und wir beheben sie gemeinsam.
Verwandte Begriffe aus dem Glossar
Links
TreScout hat dieses Werkzeug nicht entwickelt · wir haben es in den GitHub-Trends gefunden und stellen es vor. Diese Seite beschreibt das Repository so, wie es am 2026-08-16 war: Die Anzahl der Sterne und unser Text stammen von diesem Tag, das Repository kann sich seitdem geändert haben. Den aktuellen Stand finden Sie über den Link zum Repository. Der Präsentationstext wurde mit KI aus der eigenen Dokumentation des Repositories erstellt und diese Seite wurde maschinell übersetzt aus dem türkischen Original · maßgeblich ist die türkische Fassung.