Qwen3-Coder 30B-A3B trên Mac 64 GB: tốc độ, chất lượng, bộ nhớ
Alibaba Qwen, ra mắt Jul 2025. 30.5B tham số, 3.3B hoạt động (hỗn hợp chuyên gia). Bản 4-bit MLX, tải 17,2 GB. Giấy phép Apache-2.0.
- HumanEval+ pass@1: 134 trên 164 (81,7%), hạng 7 trên 8
- HumanEval pass@1: 143 trên 164 (87,2%)
- Tốc độ sinh: 93,9 token mỗi giây (5 lần, từ 93,2 đến 94,1); đọc prompt 1.402 token mỗi giây
- Bộ nhớ cao nhất: 17,8 GB · điện năng khi sinh chữ: 29 W · GPU cao nhất 77 °C
Tự chạy thử
pip install mlx-lm mlx_lm.chat --model mlx-community/Qwen3-Coder-30B-A3B-Instruct-4bit
HumanEval/1
Tách một chuỗi ngoặc lồng nhau thành các nhóm cân bằng riêng biệt.
Logic đúng, nhưng nó dùng List mà không import. Code lỗi NameError trước khi chạy được test nào.
Các bài bị sai
HumanEval/1, HumanEval/65, HumanEval/75, HumanEval/81, HumanEval/89, HumanEval/100, HumanEval/109, HumanEval/113, HumanEval/115, HumanEval/116, HumanEval/120, HumanEval/122, HumanEval/123, HumanEval/127, HumanEval/129, HumanEval/130, HumanEval/132, HumanEval/145, HumanEval/159, HumanEval/160, HumanEval/163
File gốc: speed.log, evaluate.log, eval_results.json