Qwen3-Coder 30B-A3B en un Mac de 64 GB: velocidad, calidad, memoria
Alibaba Qwen, lanzado en Jul 2025. 30.5B parámetros, 3.3B activos (mezcla de expertos). Versión 4-bit MLX, 17,2 GB de descarga. Licencia Apache-2.0.
- HumanEval+ pass@1: 134 de 164 (81,7%), puesto 7 de 8
- HumanEval pass@1: 143 de 164 (87,2%)
- Velocidad de generación: 93,9 tokens por segundo (5 pruebas, de 93,2 a 94,1); prompt 1.402 tokens por segundo
- Memoria máxima: 17,8 GB · consumo al generar: 29 W · GPU máx. 77 °C
Pruébalo tú mismo
pip install mlx-lm mlx_lm.chat --model mlx-community/Qwen3-Coder-30B-A3B-Instruct-4bit
HumanEval/1
Separar una cadena de paréntesis anidados en sus grupos equilibrados independientes.
La lógica era correcta, pero usó List sin importarlo. El código falló con un NameError antes de ejecutar una sola prueba.
Problemas que falló
HumanEval/1, HumanEval/65, HumanEval/75, HumanEval/81, HumanEval/89, HumanEval/100, HumanEval/109, HumanEval/113, HumanEval/115, HumanEval/116, HumanEval/120, HumanEval/122, HumanEval/123, HumanEval/127, HumanEval/129, HumanEval/130, HumanEval/132, HumanEval/145, HumanEval/159, HumanEval/160, HumanEval/163
Archivos originales: speed.log, evaluate.log, eval_results.json