kipreise.info
Lokale Modelle › Mixed (Text + Bild) › gemma-4-12B-it-qat-q4_0
google · Mixed (Text + Bild) · ⟳ vor 7 Min (16.10. 19:14 UTC)

gemma-4-12B-it-qat-q4_0

Alleskönner: verstehen Text und Bilder zusammen — teils auch Audio.

Apache-2.0

Größe (kompakt)7,0 GB
Kleinste Variante7,0 GB
LizenzApache-2.0
Parameter12B
KategorieMixed (Text + Bild)
Downloads (30 Tage)788k
Likes326
Aktualisiertvor 3 Mon.
Erstelltvor 4 Mon.
Hersteller/Orggoogle
Repo-Größe (alle Dateien)7,2 GB

Läuft das auf deinem Rechner?

Was kann es?

Ein 12-Parameter-großes Sprachmodell, das auf Google's Gemma-Basis läuft und für qualitatives Quantisieren (QAT) optimiert wurde – also bewusst für die Ausführung in 4-Bit reduziert, ohne dabei allzu viel an Leistung einzubüßen. Es eignet sich für lokale Textverarbeitung wie Zusammenfassen, Beantworten von Fragen oder Chat-Versuche.

Stärken

Dank QAT-Qualitätsreduktion ist es eine der besseren Wahl, wenn man das Modell auf begrenzter Hardware wie einem Notebook mit 16 GB RAM lokal ausführen will.

Grenzen

Mit 12B Parametern und 4-Bit-Qualisierung ist es vor allem für Anfänger und KI-Hobbyarbeit geeignet – für kritische, fachlich präzise Aufgaben fehlt es regelmäßig an Genauigkeit.

Für wen?

Für alle, die ein lokales Modell ohne Cloud-Abhängigkeit ausprobieren und nicht wochenlang Rechenleistung an Modellen feilen wollen.

So startest du es

Jeder Befehl ist fertig für dieses Modell: kopieren und in die Konsole einfügen.

GGUF-Fassung vorhanden: Ollama lädt es automatisch von Hugging Face (wahlweise die passende Größe).

🚀 Ollama (Ein-Klick)

Am einfachsten — fertig in 30 Sekunden.

ollama run hf.co/google/gemma-4-12B-it-qat-q4_0-gguf
🖥️ LM Studio (grafische Oberfläche)

Für alle, die lieber klicken — kostenlos.

lms get google/gemma-4-12B-it-qat-q4_0-gguf
⚙️ llama.cpp (für Profis)

Nach dem Download — Maximum an Tempo.

llama-cli -m gemma-4-12B-it-qat-q4_0-Q4_K_M.gguf # Dateiname aus dem Download-Ordner
Dein Rechner

Besonderheiten

Was dieses Modell ausmacht — geprüft aus den offiziellen Angaben (⟳ vor 7 Min (16.10. 19:14 UTC)).

Alles-Könner (Omni)Versteht Text, Bild und Audio in einem Modell.
Basis: gemma-4-12B-it-qat-q4_0-unquantizedAufgebaut auf google/gemma-4-12B-it-qat-q4_0-unquantized (Quantisierung) — Original-Modellkarte beim Anbieter. Quelle ↗
Paper / ForschungarXiv:2607.02770 — die Original-Arbeit zum Modell bzw. Verfahren. Quelle ↗
In Spaces im Einsatz3 Hugging-Face-Spaces nutzen dieses Modell.
Großes KontextfensterBis zu 262k Token auf einmal — ganze Dokumente in einem Rutsch.
1 VariantenGGUF-Dateien von 7,0 GB bis 7,0 GB — laufen mit llama.cpp, LM Studio & Ollama.
Kommerziell nutzbarLizenz: Apache-2.0.
Beliebt788k Downloads auf Hugging Face.
TechnikModelltyp: gemma4_unified · 48 Schichten · Bibliothek: transformers

Alle Angaben stammen aus den offiziellen Quellen (Hugging Face) — wir hosten keine Modelle.

Wo bekommst du es?

Wir hosten nichts — hier geht es direkt zur Quelle. Die Anleitung unten zeigt dir Schritt für Schritt, wie du das Modell startest.

Auf Hugging Face herunterladen Bei Ollama suchen Bei LM Studio suchen

Größen & Quants

Kleinere Datei = weniger Speicherbedarf, dafür minimal geringere Qualität. Der Check oben zeigt dir für jede Variante, ob sie auf deinem Rechner läuft — entscheiden musst nur du.

VarianteDateigrößeSpeicherbedarf (grob)
gemma-4-12b-it-qat-q4_07,0 GB9,0 GB
Größenangaben aus der Dateiliste bei Hugging FaceAlle Dateien: HF ↗

So startest du gemma-4-12B-it-qat-q4_0

  1. Herunterladen: Über den HF-Button oben (oder direkt in Ollama/LM Studio suchen).
  2. Starten: Unsere Anleitung zeigt dir die einfachsten Wege — LM Studio (Klick-Oberfläche) oder Ollama (ein Befehl).
  3. Chatten: Modell auswählen, lostippen. Ohne Internet, ohne Anmeldung.

Gleiches Modell lieber als API nutzen? Preisvergleich öffnen →

Häufige Fragen

Läuft gemma-4-12B-it-qat-q4_0 auf meinem Rechner?

Das zeigt dir der Check oben — Variante für Variante. Typische Größen: die übliche kompakte Variante wiegt 7,0 GB, die kleinste 7,0 GB — rechne grob ~2 GB Puffer dazu.

Was kostet gemma-4-12B-it-qat-q4_0?

Nichts — das Modell ist kostenlos herunterladbar. Kosten entstehen nur für Strom oder eine gemietete GPU, falls dein Rechner zu klein ist.

Ähnliche Modelle: gemma-4-12b-it · gemma-4-E4B-it-MLX-4bit · Clef-Flash · Zurück zur Übersicht

Daten: Hugging Face API · ⟳ vor 7 Min (16.10. 19:14 UTC). Wir hosten keine Modelle — alle Links führen zu den offiziellen Quellen.