GLM-4.5-Air 106B-A12B を動かすPCスペック(必要VRAM・メモリ・速度の目安)
メモリ64GB以上向けの高性能MoE
量子化別の必要メモリ
ファイルサイズは Hugging Face(unsloth/GLM-4.5-Air-GGUF) の実サイズ(事実)。KVキャッシュは8,192トークン・fp16でモデル構造(47層)から計算。必要メモリ合計には計算バッファを含みます。
| 量子化 | ファイル | KV(8k) | 必要合計 | GPUなら | Macなら |
|---|---|---|---|---|---|
| 2bit(IQ2_M) 品質劣化大。最後の手段 | 41GB | 1.5GB | 45GB | GPU単体では不可 | 64GB〜 |
| 2bit(Q2_K) 品質劣化大。最後の手段 | 42GB | 1.5GB | 45GB | GPU単体では不可 | 64GB〜 |
| 3bit(Q3_K_M) メモリ優先 | 53GB | 1.5GB | 57GB | GPU単体では不可 | 96GB〜 |
| 4bit(IQ4_XS) Q4_K_Mより一回り小さい | 56GB | 1.5GB | 60GB | GPU単体では不可 | 96GB〜 |
| 4bit(Q4_K_M) 標準。迷ったらこれ | 68GB | 1.5GB | 72GB | GPU単体では不可 | 96GB〜 |
| 5bit(Q5_K_M) 品質重視 | 78GB | 1.5GB | 82GB | GPU単体では不可 | 128GB〜 |
| 6bit(Q6_K) ほぼ無劣化 | 92GB | 1.5GB | 97GB | GPU単体では不可 | 192GB〜 |
| 8bit(Q8_0) 無劣化に近い | 109GB | 1.5GB | 115GB | GPU単体では不可 | 192GB〜 |
| 16bit(BF16) 元精度 | 206GB | 1.5GB | 214GB | GPU単体では不可 | 512GB〜 |
4bit(Q4_K_M)が動く機種と推定速度
速度はテキスト生成(tok/s)の推定。「較正」= 同機種のllama.cpp公開ベンチマークで実効係数を合わせた推定、「推定」= 同系統機種の係数を流用。10 tok/s で人が読む速さの約2倍です。
快適 20 tok/s以上(10機種)
- Apple M2 Ultra(128GB) 約33 tok/s較正
- Apple M2 Ultra(192GB) 約33 tok/s較正
- Apple M3 Ultra(96GB) 約32 tok/s較正
- Apple M3 Ultra(256GB) 約32 tok/s較正
- Apple M3 Ultra(512GB) 約32 tok/s較正
- Apple M1 Ultra(128GB) 約30 tok/s較正
- Apple M4 Max(128GB) 約27 tok/s較正
- Apple M3 Max(96GB) 約21 tok/s較正
- Apple M3 Max(128GB) 約21 tok/s較正
- Apple M2 Max(96GB) 約21 tok/s較正
実用 8〜20 tok/s(1機種)
- AMD Ryzen AI Max+ 395(Strix Halo)(メモリ128GB) 約11 tok/s推定
遅い 載るが遅い(1機種)
- 一般的なデスクトップ/ノートPC(DDR5-5600・GPUなし)(メモリ128GB) 約2.8 tok/s推定
CPUオフロードで動く(0機種・システムメモリ32GB想定)
- なし
動かない機種(95)を見る
- GeForce RTX 3060 12GB あと60GB
- GeForce RTX 3060 Ti あと64GB
- GeForce RTX 3070 あと64GB
- GeForce RTX 3070 Ti あと64GB
- GeForce RTX 3080 10GB あと62GB
- GeForce RTX 3080 12GB あと60GB
- GeForce RTX 3080 Ti あと60GB
- GeForce RTX 3090 あと48GB
- GeForce RTX 3090 Ti あと48GB
- GeForce RTX 4060 あと64GB
- GeForce RTX 4060 Ti 8GB あと64GB
- GeForce RTX 4060 Ti 16GB あと56GB
- GeForce RTX 4070 あと60GB
- GeForce RTX 4070 SUPER あと60GB
- GeForce RTX 4070 Ti あと60GB
- GeForce RTX 4070 Ti SUPER あと56GB
- GeForce RTX 4080 あと56GB
- GeForce RTX 4080 SUPER あと56GB
- GeForce RTX 4090 あと48GB
- GeForce RTX 5060 あと64GB
- GeForce RTX 5060 Ti 8GB あと64GB
- GeForce RTX 5060 Ti 16GB あと56GB
- GeForce RTX 5070 あと60GB
- GeForce RTX 5070 Ti あと56GB
- GeForce RTX 5080 あと56GB
- GeForce RTX 5090 あと40GB
- GeForce RTX 4050 Laptop あと66GB
- GeForce RTX 4060 Laptop あと64GB
- GeForce RTX 4070 Laptop あと64GB
- GeForce RTX 4080 Laptop あと60GB
- GeForce RTX 4090 Laptop あと56GB
- GeForce RTX 5060 Laptop あと64GB
- GeForce RTX 5070 Laptop あと64GB
- GeForce RTX 5070 Ti Laptop あと60GB
- GeForce RTX 5080 Laptop あと56GB
- GeForce RTX 5090 Laptop あと48GB
- Radeon RX 7600 あと64GB
- Radeon RX 7700 XT あと60GB
- Radeon RX 7800 XT あと56GB
- Radeon RX 7900 XT あと52GB
- Radeon RX 7900 XTX あと48GB
- Radeon RX 9060 XT 16GB あと56GB
- Radeon RX 9070 あと56GB
- Radeon RX 9070 XT あと56GB
- Apple M1(8GB) あと67GB
- Apple M1(16GB) あと61GB
- Apple M1 Pro(16GB) あと61GB
- Apple M1 Pro(32GB) あと51GB
- Apple M1 Max(32GB) あと51GB
- Apple M1 Max(64GB) あと24GB
- Apple M1 Ultra(64GB) あと24GB
- Apple M2(8GB) あと67GB
- Apple M2(16GB) あと61GB
- Apple M2(24GB) あと56GB
- Apple M2 Pro(16GB) あと61GB
- Apple M2 Pro(32GB) あと51GB
- Apple M2 Max(32GB) あと51GB
- Apple M2 Max(64GB) あと24GB
- Apple M2 Ultra(64GB) あと24GB
- Apple M3(8GB) あと67GB
GLM-4.5-Air 106B-A12Bを動かせるPC・Macを今日買うなら
PR: 以下は広告リンクを含みます(Amazonアソシエイト・各社アフィリエイト)。価格の目安は執筆時点のもので変動します。価格・在庫はリンク先でご確認ください。
Ryzen AI Max+ 395 ミニPC(メモリ128GB)
Windows/Linuxで128GBユニファイド。gpt-oss-120b・70BクラスをGPU側に96GB割り当てて常時サービング
Ryzen AI Max+ 395・LPDDR5X 128GB(256GB/s)・NVMe 2TB ・ 目安 32〜48万円
要件を満たす中で最も手頃
Mac Studio M3 Ultra(メモリ512GB)をLLMサーバに
DeepSeek V3級(671B)の4bitを1台で。チームのローカルLLMサーバ
M3 Ultra・ユニファイドメモリ512GB・SSD 4TB ・ 目安 150〜200万円
将来の用途拡張(大きなモデル・並列エージェント)に余裕
Mac Studio M4 Max(メモリ128GB・SSD 2TB)
gpt-oss-120b・Qwen3.5 122Bが載り、帯域546GB/sで実用速度。個人向けローカルLLMの本命
M4 Max・ユニファイドメモリ128GB・SSD 2TB ・ 目安 62〜72万円
Macで同じ仕事をするなら
よくある質問
GLM-4.5-Air 106B-A12Bを動かすのに必要なVRAMは?
4bit量子化(4bit(Q4_K_M))でファイル68GB、8,192トークンのKVキャッシュを含めて約72GBが必要です。GPU単体のVRAMには載らず、Macのユニファイドメモリか複数GPUが必要です。
GLM-4.5-Air 106B-A12BはMacで動く?
動きます。ユニファイドメモリ96GB以上のApple Silicon(例: Apple M3 Ultra(96GB))で4bit量子化が実用速度です。