kipreise.info
Lokale Modelle › Text & Chat › MiniCPM-SALA-AWQ-8bit
cyankiwi · Text & Chat · ⟳ vor 7 Min (16.10. 19:14 UTC)

MiniCPM-SALA-AWQ-8bit

Sprachmodelle für Chat, Wissen und Alltag — die Klassiker für den eigenen Rechner.

Apache-2.0

Größe (kompakt)10,6 GB
Kleinste Variante–
LizenzApache-2.0
Parameter3.1B
KategorieText & Chat
Downloads (30 Tage)604k
Likes–
Aktualisiertvor 3 Mon.
Erstelltvor 8 Mon.
Hersteller/Orgcyankiwi
Tensor-TypI32
Repo-Größe (alle Dateien)10,6 GB

Läuft das auf deinem Rechner?

Was kann es?

Ein kompaktes Textgenerierungs-Modell (3,1 Milliarden Parameter) aus der MiniCPM-Familie, das in 8-Bit-Quantisierung (AWQ) vorkomprimiert ist und dadurch auch auf schwächerer Hardware lauffähig bleibt. Es beantwortet Fragen, schreibt und fasst Texte auf Deutsch und anderen Sprachen zusammen, bleibt aber für komplexe Aufgaben deutlich hinter großen Modellen zurück.

Stärken

Der Platzhirsch der Kompaktklasse: relativ gut für seine Größe, sparsam im Speicherbedarf und dank AWQ-8bit schnell auf Consumer-Hardware lauffähig.

Grenzen

Bei nur 3,1 Mrd. Parametern und 8-Bit-Quantisierung sind detaillierte Fakten und komplexe Logik unzuverlässig, und die Apache-2.0-Lizenz ist freizügig, was auch bedeutet, dass keine Garantie auf Richtigkeit besteht.

Für wen?

Für Bastler und Entwickler, die ein kleines lokales Sprachmodell ohne teure GPU ausprobieren oder in eigene Projekte einbinden wollen.

So startest du es

Jeder Befehl ist fertig für dieses Modell: kopieren und in die Konsole einfügen.

⚠️ Für dieses Modell haben wir keine verifizierte GGUF-Fassung in der Datenbank. Ohne GGUF können Ollama, LM Studio und llama.cpp es nicht starten. Prüfe auf Hugging Face nach „cyankiwi/MiniCPM-SALA-AWQ-8bit GGUF“ (die meisten Text-Modelle haben eine, z. B. von bartowski oder unsloth) — dann gilt: ollama run hf.co/cyankiwi/MiniCPM-SALA-AWQ-8bit

Dein Rechner

Besonderheiten

Was dieses Modell ausmacht — geprüft aus den offiziellen Angaben (⟳ vor 7 Min (16.10. 19:14 UTC)).

SprachmodellBeantwortet Fragen, schreibt und fasst Texte zusammen.
Basis: MiniCPM-SALAAufgebaut auf openbmb/MiniCPM-SALA (Quantisierung) — Original-Modellkarte beim Anbieter. Quelle ↗
Paper / ForschungarXiv:2509.24663, arXiv:2601.22156 — die Original-Arbeit zum Modell bzw. Verfahren. Quelle ↗
In Spaces im Einsatz4 Hugging-Face-Spaces nutzen dieses Modell.
MehrsprachigChinesisch, Englisch
Kommerziell nutzbarLizenz: Apache-2.0.
Beliebt604k Downloads auf Hugging Face.
TechnikModelltyp: minicpm_sala · Bibliothek: transformers

Alle Angaben stammen aus den offiziellen Quellen (Hugging Face) — wir hosten keine Modelle.

Wo bekommst du es?

Wir hosten nichts — hier geht es direkt zur Quelle. Die Anleitung unten zeigt dir Schritt für Schritt, wie du das Modell startest.

Auf Hugging Face herunterladen Bei Ollama suchen Bei LM Studio suchen

Größen & Quants

Kleinere Datei = weniger Speicherbedarf, dafür minimal geringere Qualität. Der Check oben zeigt dir für jede Variante, ob sie auf deinem Rechner läuft — entscheiden musst nur du.

VarianteDateigrößeSpeicherbedarf (grob)
Keine Variantenliste verfügbar — schau in die Dateiliste bei Hugging Face.
Größenangaben aus der Dateiliste bei Hugging FaceAlle Dateien: HF ↗

So startest du MiniCPM-SALA-AWQ-8bit

  1. Herunterladen: Über den HF-Button oben (oder direkt in Ollama/LM Studio suchen).
  2. Starten: Unsere Anleitung zeigt dir die einfachsten Wege — LM Studio (Klick-Oberfläche) oder Ollama (ein Befehl).
  3. Chatten: Modell auswählen, lostippen. Ohne Internet, ohne Anmeldung.

Gleiches Modell lieber als API nutzen? Preisvergleich öffnen →

Häufige Fragen

Läuft MiniCPM-SALA-AWQ-8bit auf meinem Rechner?

Das zeigt dir der Check oben — Variante für Variante. Typische Größen: die übliche kompakte Variante wiegt –, die kleinste – — rechne grob ~2 GB Puffer dazu.

Was kostet MiniCPM-SALA-AWQ-8bit?

Nichts — das Modell ist kostenlos herunterladbar. Kosten entstehen nur für Strom oder eine gemietete GPU, falls dein Rechner zu klein ist.

Ähnliche Modelle: llama3.1 · deepseek-r1 · nomic-embed-text · Zurück zur Übersicht

Daten: Hugging Face API · ⟳ vor 7 Min (16.10. 19:14 UTC). Wir hosten keine Modelle — alle Links führen zu den offiziellen Quellen.