Gemma 4 E2B auf einem 64-GB-Mac: Tempo, Qualität, Speicher
Google, veröffentlicht Apr 2026. 5.1B Parameter, dense. 4-bit-MLX-Build, 3,6 GB Download. Lizenz Apache-2.0.
- HumanEval+ pass@1: 127 von 164 (77,4%), Platz 8 von 8
- HumanEval pass@1: 137 von 164 (83,5%)
- Generierungstempo: 130,5 Tokens pro Sekunde (5 Durchläufe, 130,3 bis 130,6); Prompt 7.728 Tokens pro Sekunde
- Spitzenspeicher: 3,5 GB · Leistung beim Generieren: 24 W · GPU max. 71 °C
Selbst ausprobieren
pip install mlx-lm mlx_lm.chat --model mlx-community/gemma-4-e2b-it-4bit
Nicht bestandene Aufgaben
HumanEval/10, HumanEval/26, HumanEval/32, HumanEval/37, HumanEval/39, HumanEval/44, HumanEval/54, HumanEval/59, HumanEval/64, HumanEval/65, HumanEval/79, HumanEval/83, HumanEval/84, HumanEval/89, HumanEval/93, HumanEval/107, HumanEval/115, HumanEval/118, HumanEval/122, HumanEval/130, HumanEval/132, HumanEval/140, HumanEval/145, HumanEval/152, HumanEval/156, HumanEval/160, HumanEval/163
Rohdateien: speed.log, evaluate.log, eval_results.json