Welche KI passt zu deinem Mac?

Welches lokale LLM auf deinem Mac läuft, wann ein Cloud-Modell besser passt und was es kostet. Mit Quellen und getrennt von Hersteller-Benchmarks.

user@mac-mini — ollama

Befehlsbeispiel · keine aufgezeichnete Messung

~/ai-on-mac ❯ ollama run gemma3:4b --verbose

>>> Erkläre Unified Memory in zwei Sätzen.

Kurz erklärt (Redaktion):

CPU und GPU nutzen denselben Speicher. Modelle, KV-Cache und macOS teilen sich den RAM.

~/ai-on-mac ❯

Wie viel RAM braucht lokale KI?

16 GB für den Einstieg, 32 GB für ernsthafte Arbeit, 64 GB und mehr für 70B-Modelle.

  1. 16 GB bis 12B Gemma 4 12B
  2. 32 GB bis 32B Qwen 3.8 27B
  3. 64 GB 70B Llama 3.1 70B
  4. 128 GB 120B gpt-oss 120B

Eigene MLX-Benchmarks

Welches lokale Modell ist wirklich gut?

38 MLX-Modelle, 16 Benchmarks, lokal gemessen auf einem Mac mini M4 mit 32 GB. Top 5 nach Durchschnittswert.

Wischen für alle Kategorien →

Top 5 nach Mittelwert aller Benchmarks, Genauigkeit in Prozent
ModellAvgWissenReasoningMatheCodingSicherheit
gpt-oss-safeguard 20BMXFP4 73,6 68,969,090,068,985,0
Qwen3.5 9B4-bit 71,7 67,079,780,049,692,0
Gemma 4 12B Coder8-bit · Community-Fine-Tune 71,5 65,984,055,762,988,9
Gemma 4 12B it4-bit 66,9 61,679,054,055,685,5
Gemma 4 12B Coder4-bit · Community-Fine-Tune 66,6 60,580,452,256,684,0

Genauigkeit in %. Avg = Mittel über alle 16 Benchmarks; Kategorien = Mittel ihrer Benchmarks. Dunkler = höher. Die Rangliste nutzt Avg, nicht das Mittel aller Einzelfragen (micro).

Export: · Mac mini M4 · 32 GB

Methodik →

Wofür nutzt du KI?

Lokal, Cloud oder beides

Redaktion

Neueste Artikel

Alle Artikel →

Neue Modelle und bewährte Anleitungen

Gerade überarbeitet

So arbeiten wir

Gemessen, belegt, getrennt

KI-unterstützte Recherche, redaktionelle Prüfung und Verantwortung: Julian Dominic Altmann.

Arbeitsweise →
  1. Eigene Messungen

    Chip, RAM, macOS, Runtime, Quantisierung und Prompt werden pro Test dokumentiert.

  2. Primärquellen

    Modellkarten, Doku und Paper zuerst; Herstellerangaben werden gekennzeichnet.

  3. Klare Kennzeichnung

    Affiliate-Links und Werbung sind markiert und ändern keine Empfehlung.