커밋 한 모금

맥 로컬 LLM 실측표

맥 스튜디오(M5 Max, 통합 메모리 48GB)에서 인기 로컬 AI 모델을 직접 내려받아 돌려 본 결과입니다. 속도와 메모리는 기계로 잰 숫자이고, 한국어는 같은 질문에 대한 실제 답변으로 비교했습니다.

이 표의 속도는 기본 실행 프로그램(mlx-lm) 기준입니다. 같은 모델도 실행 프로그램에 따라 2.4배 빨라집니다 → 실행 프로그램 비교(Splash·oMLX·mlx-lm)

부문별 1위

한국어 1위gemma-4-31b-it-4bit33/50코딩 1위NVIDIA-Nemotron-3.5-Lightning-30B-A3B-4bit10/10가장 빠름MiniCPM5-2B-mlx-4Bit238 토큰/초가장 가벼움MiniCPM5-2B-mlx-4Bit2.4GB보안 1위Spark-X2.5-4B-OptiQ-4bit7점

전체 실측표

내 맥 메모리

메모리를 고르면 그 맥에서 돌릴 만한 모델만 남깁니다(이 맥에서 잰 최대 메모리가 맥 메모리의 70% 이하).

모델답 쓰는 속도(토큰/초)최대 메모리(GB)한국어 객관식코딩어려운 코딩도구 호출지시 따르기보안한국어 답변
MiniCPM5-2B-mlx-4Bit2382.417/507/102/101/108/105/102/5
Llama-3.2-3B-Instruct-4bit236.6318/508/102/104/102/106/104/5
Phi-4-mini-instruct-4bit192.73.917/507/10-1/102/10-2/5
Qwen3-4B-Instruct-2507-4bit185.93.716/509/102/1010/108/105/104/5
NVIDIA-Nemotron-3.5-Lightning-30B-A3B-4bit172.421.321/5010/10-6/109/10-5/5
Qwen3-Coder-30B-A3B-Instruct-4bit152.618.321/507/10-2/104/10-1/5
Qwen3-30B-A3B-Instruct-2507-4bit151.618.323/5010/10-10/1010/10-5/5
Spark-X2.5-4B-OptiQ-4bit142.94.316/507/103/106/109/107/103/5
gpt-oss-20b-MXFP4-Q8135.5135/5010/10-1/105/10-5/5
Qwen3.6-35B-A3B-OptiQ-4bit125.424.127/5010/10-9/1010/10-5/5
Qwen2.5-Coder-7B-Instruct-4bit121.75.213/509/10-9/105/10-5/5
Llama-3.1-8B-Instruct-4bit115.65.915/509/102/109/107/104/104/5
Qwen3-8B-4bit112.3617/509/102/1010/108/106/105/5
GLM-4.7-Flash-4bit105.818.926/508/10-10/1010/10-4/5
gemma-4-26B-A4B-it-qat-OptiQ-4bit102.922.231/5010/10-10/1010/10-5/5
MiMo-V2.6-Distill-Qwen-9B-OptiQ-4bit82.38.822/509/10-9/108/10-5/5
Qwen3.5-9B-OptiQ-4bit81.28.827/5010/10-10/109/10-5/5
Qwen3-14B-4bit62.29.721/5010/10-10/1010/10-5/5
gemma-4-12B-it-qat-OptiQ-4bit53.610.726/5010/10-10/1010/10-5/5
Qwen3.8-27B-4bit33.918.329/5010/10-10/1010/10-5/5
Muse-Glimmer-30B-4bit33.716.67/5010/10-1/100/10--
Qwen3-32B-4bit28.420.323/509/10-10/108/10-5/5
DeepSeek-R1-Distill-Qwen-32B-4bit28.320.40/501/100/101/105/100/105/5
gemma-4-31b-it-4bit28.220.933/5010/10-10/1010/10-5/5

답 쓰는 속도: 입력 512토큰 뒤 128토큰 생성 평균. 한국어 객관식: KMMLU(HAERAE-HUB, CC BY-ND 4.0) 10개 분야 50문항. 코딩: 숨은 테스트가 있는 파이썬 10문제(전부 통과해야 정답). 도구 호출·지시 따르기: 각 10문항. 모든 점수는 코드로 채점합니다. 모델을 누르면 긴 입력 결과와 한국어 답변 원문을 볼 수 있습니다. 측정 도구 mlx-lm 0.32.0.