Gemma 4 26B-A4B en un Mac de 64 GB: velocidad, calidad, memoria
Google, lanzado en Apr 2026. 25.2B parámetros, 3.8B activos (mezcla de expertos). Versión 4-bit MLX, 15,4 GB de descarga. Licencia Apache-2.0.
- HumanEval+ pass@1: 149 de 164 (90,9%), puesto 3 de 8
- HumanEval pass@1: 157 de 164 (95,7%)
- Velocidad de generación: 80,7 tokens por segundo (5 pruebas, de 80,6 a 80,7); prompt 1.562 tokens por segundo
- Memoria máxima: 15,1 GB · consumo al generar: 27 W · GPU máx. 79 °C
Pruébalo tú mismo
pip install mlx-lm mlx_lm.chat --model mlx-community/gemma-4-26b-a4b-it-4bit
HumanEval/73
Contar el mínimo de cambios para que una lista se lea igual en ambos sentidos.
Dejó un primer borrador roto en la respuesta. 'n - - 1' significa n más uno, así que el código falló antes de llegar al bucle corregido.
Problemas que falló
HumanEval/73, HumanEval/103, HumanEval/124, HumanEval/129, HumanEval/132, HumanEval/145, HumanEval/156
Archivos originales: speed.log, evaluate.log, eval_results.json