TL;DR
- 16GB: 7B ๋ชจ๋ธ๋ง ๊ฐ๋ฅ(๋ถ์กฑ)
- 36GB: 13B ์ฌ์ ๋กญ๊ฒ, 34B Q4 ๋น ๋ฏํจ
- 64GB: 34B Q5 ์ฌ์ ๋กญ๊ฒ
- 128GB: 70B Q5 ์ฌ์ ๋กญ๊ฒ
- ๊ตฌ๋งค ํ ์ ๊ทธ๋ ์ด๋ ๋ถ๊ฐ โ ๊ตฌ๋งค ์ ์ต๋ ๋ฉ๋ชจ๋ฆฌ ์ ํ
Key Takeaways
- ํตํฉ ๋ฉ๋ชจ๋ฆฌ = CPU์ GPU ๊ณต์ โ ์ ์ฒด ์ฉ๋์ LLM ๋ชจ๋ธ์ ์ฌ์ฉ ๊ฐ๋ฅํฉ๋๋ค.
- RTX 4070์ 12GB VRAM + 32GB RAM(๋ถ๋ฆฌ). Mac์ ํตํฉ = ์ ์ฒด ์ฌ์ฉ ๊ฐ๋ฅ.
- 64GB Mac์์ macOS ์ค๋ฒํค๋(4โ8GB) ์ ์ธ ์ LLM์ ์ฝ 56โ60GB ์ฌ์ฉ ๊ฐ๋ฅํฉ๋๋ค.
- ์ค์ ์กด์ฌ: ๋ชจ๋ธ์ด ์ฌ์ ๋ฉ๋ชจ๋ฆฌ๋ฅผ ์ด๊ณผํ๋ฉด macOS๊ฐ SSD๋ฅผ ์ฌ์ฉํฉ๋๋ค. ์๋ํ์ง๋ง 5โ10๋ฐฐ ๋๋ฆฝ๋๋ค.
- ์์ํ์ ๋ฐ๋ฅธ ๋ชจ๋ธ ํฌ๊ธฐ(GB) ์ฐจ์ด: Llama 3.3 8B๋ FP16 16GB, Q4 5GB, Q8 8.5GB์ ๋๋ค.
- ์์น: ์ต๋ ๋ฉ๋ชจ๋ฆฌ๋ฅผ ๊ตฌ๋งคํ์ญ์์ค โ ๊ตฌ๋งค ํ ์ ๊ทธ๋ ์ด๋ ๋ถ๊ฐ. ํ๋งค ์ ๋ฉ๋ชจ๋ฆฌ ๋น์ฉ์ 5โ10%์ด์ง๋ง, ๋์ค์ Mac ์ ์ฒด ๊ต์ฒด๋ 100% ๋น์ฉ์ด ๋ฐ์ํฉ๋๋ค.
LLM์ ์ํ ํตํฉ ๋ฉ๋ชจ๋ฆฌ ์๋ ๋ฐฉ์
ํตํฉ ๋ฉ๋ชจ๋ฆฌ๋ CPU์ GPU ๊ฐ์ ๊ณต์ ๋๋ฉฐ ์ ์ฒด ์ฉ๋์ ๋ชจ๋ธ์ ์ฌ์ฉํ ์ ์์ต๋๋ค. ๋ณ๋์ GPU(RTX 4070์ 12GB VRAM + 32GB RAM ๋ถ๋ฆฌ)์ ๋ฌ๋ฆฌ, Apple Silicon์ ํ๋์ ํ์ ๊ณต์ ํฉ๋๋ค. 64GB Mac = ๋ชจ๋ธ์ 64GB ์ฌ์ฉ ๊ฐ๋ฅ. macOS์ ์ฑ์ด 4โ8GB๋ฅผ ์ฌ์ฉํ๋ฏ๋ก LLM์ 56โ60GB๊ฐ ๋จ์ต๋๋ค.
๋ง์คํฐ ํ: ๋ฉ๋ชจ๋ฆฌ ํฐ์ด vs ๋ชจ๋ธ ํฌ๊ธฐ
| ๋ชจ๋ธ | ํ๋ผ๋ฏธํฐ | Q3_K | Q4_K_M | Q5_K_M | Q8 | FP16 |
|---|---|---|---|---|---|---|
| Phi-4 | 3.8B | 2.1 GB | 2.5 GB | 2.9 GB | 4.0 GB | 7.6 GB |
| Mistral Small | 7B | 3.8 GB | 4.5 GB | 5.2 GB | 7.5 GB | 14 GB |
| Llama 3.3 8B | 8B | 4.2 GB | 5.0 GB | 5.8 GB | 8.5 GB | 16 GB |
| Llama 3.3 13B | 13B | 7.0 GB | 8.5 GB | 9.8 GB | 14 GB | 26 GB |
| Qwen3 34B | 34B | 17 GB | 20 GB | 24 GB | 36 GB | 68 GB |
| Llama 3.3 70B | 70B | 36 GB | 42 GB | 49 GB | 74 GB | 140 GB |
| Llama 3.3 405B | 405B | 200+ GB | 240 GB | 280 GB | 410 GB | 810 GB |
Mac์์ ์ ํฉ ์ฌ๋ถ ๊ณ์ฐ ์ macOS ์ค๋ฒํค๋ 4-8 GB๋ฅผ ์ถ๊ฐํ์ญ์์ค.
์ ํฉ/๋ถ์ ํฉ ๋งคํธ๋ฆญ์ค
| ๋ชจ๋ธ + ์์ํ | 16GB | 36GB | 64GB | 128GB |
|---|---|---|---|---|
| Phi-4 Q4 (2.5 GB) | โ ์ถฉ๋ถ | โ ์ถฉ๋ถ | โ ์ถฉ๋ถ | โ ์ถฉ๋ถ |
| Llama 3.3 8B Q4 (5 GB) | โ ๏ธ ๋น ๋ฏ | โ ์ฌ์ | โ ์ถฉ๋ถ | โ ์ถฉ๋ถ |
| Llama 3.3 8B Q8 (8.5 GB) | โ ๋ถ๊ฐ | โ ์ฌ์ | โ ์ถฉ๋ถ | โ ์ถฉ๋ถ |
| Llama 3.3 13B Q4 (8.5 GB) | โ ๋ถ๊ฐ | โ ์ฌ์ | โ ์ถฉ๋ถ | โ ์ถฉ๋ถ |
| Qwen3 34B Q4 (20 GB) | โ ๋ถ๊ฐ | โ ๏ธ ๋น ๋ฏ | โ ์ฌ์ | โ ์ถฉ๋ถ |
| Qwen3 34B Q5 (24 GB) | โ ๋ถ๊ฐ | โ ๋ถ๊ฐ | โ ์ฌ์ | โ ์ถฉ๋ถ |
| Llama 3.3 70B Q3 (36 GB) | โ ๋ถ๊ฐ | โ ๋ถ๊ฐ | โ ๏ธ ๋น ๋ฏ | โ ์ฌ์ |
| Llama 3.3 70B Q4 (42 GB) | โ ๋ถ๊ฐ | โ ๋ถ๊ฐ | โ ๏ธ ๋งค์ฐ ๋น ๋ฏ | โ ์ฌ์ |
| Llama 3.3 70B Q5 (49 GB) | โ ๋ถ๊ฐ | โ ๋ถ๊ฐ | โ ๋ถ๊ฐ | โ ์ฌ์ |
| Llama 3.3 70B Q8 (74 GB) | โ ๋ถ๊ฐ | โ ๋ถ๊ฐ | โ ๋ถ๊ฐ | โ ๊ฐ๋ฅ |
โ ์ถฉ๋ถ = ์ฌ์ 4+ GB | โ ์ฌ์ = ์ฌ์ 2-4 GB | โ ๏ธ ๋น ๋ฏ = ์ฌ์ 2 GB ๋ฏธ๋ง | โ ๋ถ๊ฐ = ์ค์ ์ฌ์ฉ ๋๋ ์ถฉ๋
๊ฐ ๋ฉ๋ชจ๋ฆฌ ํฐ์ด์์ ์คํ ๊ฐ๋ฅํ ๋ชจ๋ธ(์ค์ฉ์ )
- 116 GB (M5 base, MacBook Air)
Why it matters: Llama 3.3 8B Q4 ๊ฐ๋ฅ(5GB ๋ชจ๋ธ + 8GB OS = 13GB) โ ํ์ง๋ง ๋น ๋ฏํจ. Llama 8B Q8์ ์ค์ ์์ด ๋ถ๊ฐ. Whisper small์ ํจ๊ป ์คํ ๊ฐ๋ฅ. - 236 GB (M5 Pro base)
Why it matters: Llama 3.3 8B Q8 ์ฌ์ ๋กญ๊ฒ ๊ฐ๋ฅ. Llama 13B Q4 ๊ฐ๋ฅ. Qwen3 34B Q4 ๊ฒจ์ฐ ๊ฐ๋ฅ(20GB + 8GB OS = 28GB). ๋ฉํฐ ๋ชจ๋ธ: Whisper + LLaVA + TTS ๋์ ์คํ ๊ฐ๋ฅ โ - 364 GB (M5 Pro max)
Why it matters: Qwen3 34B Q5 ์ฌ์ ๋กญ๊ฒ ๊ฐ๋ฅ(24GB). Llama 70B Q3 ๊ฒจ์ฐ ๊ฐ๋ฅ. ๋ฉํฐ ๋ชจ๋ธ ์คํ์ ์ํ ์ถฉ๋ถํ ์ฌ์ ๊ณต๊ฐ. - 4128 GB (M5 Max)
Why it matters: Llama 3.3 70B Q5 ์ฌ์ ๋กญ๊ฒ ๊ฐ๋ฅ(49GB). 70B Q8 ๊ฐ๋ฅ(74GB). ๋ฉํฐ๋ชจ๋ฌ: Whisper + 90B ๋น์ ๋ชจ๋ธ + 8B LLM ๋์ ์คํ ๊ฐ๋ฅ โ
๋ฉํฐ ๋ชจ๋ธ ์คํ ๋ฉ๋ชจ๋ฆฌ ์๊ตฌ ์ฌํญ
| ์คํ ์ฌ์ฉ ์ฌ๋ก | ํ์ ๋ฉ๋ชจ๋ฆฌ |
|---|---|
| LLM๋ง (Llama 8B Q4) | 5 GB + OS = 13 GB |
| LLM + STT (Llama 8B + Whisper large-v3) | 8 GB + OS = 16 GB |
| LLM + STT + TTS (์์ฑ ์ด์์คํดํธ) | 9 GB + OS = 17 GB |
| LLM + ๋น์ (Llama 8B + LLaVA 7B) | 11 GB + OS = 19 GB |
| ์ ์ฒด ๋ฉํฐ๋ชจ๋ฌ (LLM + ๋น์ + STT + TTS) | 14 GB + OS = 22 GB |
| LLM + RAG (Llama 8B + ์๋ฒ ๋ฉ + ChromaDB) | 8 GB + OS = 16 GB |
| ํค๋น ๋ฉํฐ๋ชจ๋ฌ (Llama 70B Q4 + Vision 90B) | 100+ GB |
22 GB ์ด์์ ์คํ์ ์ต์ 36GB Mac์ด ํ์ํฉ๋๋ค. 50 GB ์ด์์ ์คํ์ ์ต์ 64GB Mac์ด ํ์ํฉ๋๋ค. ํค๋น ๋ฉํฐ๋ชจ๋ฌ ์คํ์ 128GB M5 Max์์๋ง ์๋ํฉ๋๋ค.
์ปจํ ์คํธ ์๋์ฐ๊ฐ ๋ฉ๋ชจ๋ฆฌ ์ค๋ฒํค๋๋ฅผ ์ถ๊ฐํฉ๋๋ค
KV ์บ์๋ ์ปจํ ์คํธ ๊ธธ์ด์ ๋ฐ๋ผ ํ์ฅ๋ฉ๋๋ค โ ์ปจํ ์คํธ ์๋์ฐ๊ฐ ๊ธธ์๋ก ๋ฐํ์์ ๋ชจ๋ธ์ด ๋ ๋ง์ ๋ฉ๋ชจ๋ฆฌ๋ฅผ ์ฌ์ฉํฉ๋๋ค. ์ด๋ ๋น ๋ฏํ ์ค์ ์ ์ค์์ผ๋ก ๋ฐ์ด๋ฃ์ ์ ์๋ ํํ ํจ์ ์ ๋๋ค.
- Llama 3.3 8B, 8K ์ปจํ ์คํธ: +0.5 GB
- Llama 3.3 8B, 32K ์ปจํ ์คํธ: +2 GB
- Llama 3.3 8B, 128K ์ปจํ ์คํธ: +8 GB
- Llama 3.3 70B, 32K ์ปจํ ์คํธ: +6 GB
- Llama 3.3 70B, 128K ์ปจํ ์คํธ: +24 GB
์ต๋ ๋ฉ๋ชจ๋ฆฌ๋ฅผ ๊ตฌ๋งคํด์ผ ํ๋ ์ด์
- ๊ตฌ๋งค ํ Apple Silicon ๋ฉ๋ชจ๋ฆฌ ์ ๊ทธ๋ ์ด๋ ๋ถ๊ฐํฉ๋๋ค.
- ๋ชจ๋ธ ํฌ๊ธฐ๊ฐ ์ฑ์ฅ ์ค: ํ์ฌ 8B โ 2027๋ 13โ34B๊ฐ ์ค์ํธ ์คํ.
- 16GB๋ LLM์ ์ด๋ฏธ ๋ถ์กฑํฉ๋๋ค โ ์ต์ 36GB ๊ถ์ฅ.
- ๊ฐ๊ฒฉ ์ฐจ์ด: ๊ตฌ๋งค ์ 36GBโ64GB๋ ์ฝ $200 ์ถ๊ฐ์ด๋ฉฐ, 2๋ ํ 36GB ์ฉ๋์ ์ด๊ณผํ๋ ๋ชจ๋ธ ๋๋ฌธ์ ์ Mac ๊ตฌ๋งค๋ฅผ ๋ง์ ์ ์์ต๋๋ค.
- ์์: M5 Pro 36GB๋ ํ์ฌ $999; 64GB๋ $1,199. 2๋ ํ ์ Mac ๊ตฌ๋งค: ๋์ผํ M5 Pro 64GB ๊ตฌ์ฑ์ $1,500+(์ด์ฉ ๊ฐ๋ฅํ ๊ฒฝ์ฐ).
์์ํ๊ฐ ํ์ง์ ๋ฏธ์น๋ ์ํฅ
Q4_K_M (4๋นํธ): FP16 ๋๋น ํ์ง ์์ค ์ฝ 1โ2%. ๋๋ถ๋ถ์ ์ฉ๋์์ ์ฐจ์ด๋ฅผ ๋๋ ์ ์์ต๋๋ค. ๊ฐ์ฅ ์ข์ ๊ธฐ๋ณธ๊ฐ.
Q5_K_M (5๋นํธ): ํ์ง ์์ค ์ฝ 0.5โ1%. ๋ฌด์ํ ์์ค. ์ฌ์ ๋ฉ๋ชจ๋ฆฌ๊ฐ ์๋ค๋ฉด ๊ถ์ฅ.
Q8 (8๋นํธ): ํ์ง ์์ค ์ฝ 0.1%. ์ฌ์ค์ ๋ฌด์์ค.
Q3_K (3๋นํธ): ํ์ง ์์ค 3โ5%. ๋ณต์กํ ์ถ๋ก ์์ ๋์ ๋๋๋ค. ๊ณต๊ฐ์ด ์ ํ๋ ๊ฒฝ์ฐ์๋ง ํ์ฉ.
36GB์ 64GB ์ค ์ด๋ ๊ฒ์ ์ ํํด์ผ ํฉ๋๊น?
์์ฐ์ด ํ๋ฝํ๋ค๋ฉด 64GB๋ฅผ ๊ตฌ๋งคํ์ญ์์ค($200 ์ถ๊ฐ). 36GB๋ ํ์ฌ ์๋ํ์ง๋ง ๋ชจ๋ธ์ด ์ฑ์ฅํจ์ ๋ฐ๋ผ 12๊ฐ์ ํ์๋ ๋ถ์กฑํ๊ฒ ๋๊ปด์ง ๊ฒ์ ๋๋ค. 64GB๋ 2027โ2028๋ ๊น์ง ๋ฏธ๋ ๋๋น๊ฐ ๋ฉ๋๋ค.
๋์ค์ ๋ฉ๋ชจ๋ฆฌ๋ฅผ ์ ๊ทธ๋ ์ด๋ํ ์ ์์ต๋๊น?
์๋์. Apple Silicon ๋ฉ๋ชจ๋ฆฌ๋ ์๋๋ง๋์ด ์์ด ์ ๊ทธ๋ ์ด๋๊ฐ ๋ถ๊ฐ๋ฅํฉ๋๋ค. ๊ตฌ๋งค ์ ์ต๋ ์ฉ๋์ ์ ํํ์ญ์์ค.
16GB๊ฐ ์ถฉ๋ถํ์ง ์์ ์ด์ ๋ ๋ฌด์์ ๋๊น?
LLM์ 16GB + macOS์ 4โ8GB = ์ฌ์ฉ ๊ฐ๋ฅํ ์ฉ๋ 8โ12GB. Llama 8B Q4๋ 5GB๊ฐ ํ์ํ๋ฏ๋ก Whisper๋ ๋ค๋ฅธ ์์ ์ ์ํ ๊ณต๊ฐ์ด ์์ต๋๋ค. ๋๋ฌด ๋น ๋ฏํฉ๋๋ค.
128GB๊ฐ ์ ๋ง ํ์ํฉ๋๊น?
70B ๋ชจ๋ธ์ ์ ๊ธฐ์ ์ผ๋ก ์คํํ๊ฑฐ๋ ๋น์ + LLM + STT๋ฅผ ๋์์ ์ฌ์ฉํด์ผ ํ๋ ๊ฒฝ์ฐ์๋ง ํ์ํฉ๋๋ค. ๊ทธ๋ ์ง ์๋ค๋ฉด 64GB๋ก ์ถฉ๋ถํฉ๋๋ค.
48GB๊ฐ ๋ก์ปฌ LLM์ ์ถฉ๋ถํฉ๋๊น?
๋ค โ 48GB(M4 Pro ๋ฐ ์ผ๋ถ M5 Pro ๊ตฌ์ฑ์์ ์ฌ์ฉ ๊ฐ๋ฅ)๋ ํธ์ํ ์ค๊ฐ ์ง์ ์ ๋๋ค. ๋ชจ๋ 34B ๋ชจ๋ธ, 70B Q3(ํ๊ณ์์), ์ ์ฒด ๋ฉํฐ๋ชจ๋ฌ ์คํ์ ์คํํฉ๋๋ค. 36GB๋ณด๋ค ๋ซ์ง๋ง, 64GB๋ฅผ ๊ตฌ๋งคํ ์ ์๋ค๋ฉด ๋ฏธ๋ ๋๋น ๊ฐ์น๊ฐ ์์ต๋๋ค.
Llama 3.3 70B๋ฅผ ๋ก์ปฌ์์ ์คํํ๋ ค๋ฉด ๋ฉ๋ชจ๋ฆฌ๊ฐ ์ผ๋ง๋ ํ์ํฉ๋๊น?
์ต์ 48GB(Q3 ์์ํ, ๋์ ๋๋ ํ์ง ์ ํ). ๊ถ์ฅ 64GB(Q4 ์์ํ, ๋น ๋ฏํ ์ ํฉ). ์ฌ์ ๋ก์ด 128GB(Q5/Q8 ์์ํ, ๋์ ํ์ง). 64GB ํฐ์ด๋ ์ ์คํ ๋ฉ๋ชจ๋ฆฌ ๊ด๋ฆฌ๊ฐ ํ์ํ๋ฉฐ; 128GB๋ง์ด 70B๋ฅผ ์ํ ์ ์ผํ ๊ฑฑ์ ์๋ ์ต์ ์ ๋๋ค.
2026๋ ๋ก์ปฌ AI๋ฅผ ์ํด 128GB๊ฐ ํ์ํฉ๋๊น?
70B ๋ชจ๋ธ์ ์ ๊ธฐ์ ์ผ๋ก ์คํํ๊ฑฐ๋ ๋น์ + LLM + STT ์คํ์ ๋์์ ์ฌ์ฉํด์ผ ํ๋ ๊ฒฝ์ฐ์๋ง ํ์ํฉ๋๋ค. ์ผ์์ ์ธ LLM ์ฌ์ฉ(8B-34B ๋ชจ๋ธ, RAG, ์ฝ๋ฉ ์ง์)์๋ 64GB M5 Pro๊ฐ ์ต์ ์ ๋๋ค. 128GB๋ 70B๊ฐ ํน๋ณํ ํ์ํ ๊ฒฝ์ฐ๊ฐ ์๋๋ผ๋ฉด ํ๊ณ ์ด๋์ ์ํ 2-3๋ฐฐ ๊ฐ๊ฒฉ ์ธ์์ ๋๋ค.