IQ4_XSとは — 必要メモリと選びどころ(2026年10月)
Q4_K_Mより1割ほど小さい4bit量子化です。「あと1GB足りない」ときの逃げ道として使われます。
どういう仕組みか
IQ系はimportance matrix(重要度行列)を使う量子化で、事前に流したテキストで重みごとの重要度を測り、重要な部分により多くのビットを割り当てます。XSはextra small。平均4.3ビット前後で、Q4_K_Mより10%前後小さくなります。生成時の計算はQ4_K_Mよりわずかに重く、CPU実行では速度差が出ることがあります。
品質はどう変わるか
同じ4bit帯なのでQ4_K_Mに近い水準です。ファイルが小さいぶん、VRAM 16GBに27Bクラスを載せる、といった「ぎりぎりの一手」で価値があります。
選ぶ場面
Q4_K_Mが数GB溢れるとき。当サイトの機種別ページの「量子化を落とせば収まるモデル」で、この形式が選ばれることが多くあります。
近い形式との使い分け
Q4_K_Mより1割ほど小さく収まります。あと数百MB足りずに収まらない、という場面で効く形式です。品質はQ4_K_Mよりわずかに落ちますが、量子化を3bitまで下げるよりは確実に良い結果になります。容量がぎりぎりのときの逃げ道として使います。
つまずきどころ
IQ系の量子化は、計算のときに展開する処理が入るため、環境によっては同じサイズのK系より生成が遅くなることがあります。VRAMに収まっているのに思ったより速度が出ないときは、K系に替えて比べてみましょう。
品質が落ちたと感じたときの確かめ方
同じモデルのQ4_K_M版と交互に使ってみて、応答の質と速度の両方を見ます。容量に余裕があるならK系、ぎりぎりならIQ系。この判断は機種ごとに変わるので、手元で一度確かめておくと以後の選択が速くなります。
同じモデルを他の形式にすると
この形式が配布されているモデルのうち最も大きいGLM-5.3(753.86B)を例に、形式を変えたときのファイルサイズを並べます。IQ4_XSのときが340GBです。
| 形式 | 平均ビット | ファイル | IQ4_XSとの差 |
|---|---|---|---|
| IQ2_M | 2.7 | 222GB | 118GB |
| IQ4_XS(このページ) | 4.3 | 340GB | — |
| Q8_0 | 8.5 | 746GB | +406GB |
同じモデルでも形式でこれだけ変わります。あと数GBで手元の容量に載らない、というときは、モデルを替える前にこの表の1段下を試すほうが早いことがあります。コンテキスト長を伸ばす余地も、ここで決まります。
容量別に何本動くか
| メモリ容量 | IQ4_XSで収まるモデル数 |
|---|---|
| VRAM 8GB / Mac 8GB相当(実効5.4GB) | 52 / 190 |
| VRAM 12GB / Mac 12GB相当(実効8.0GB) | 85 / 190 |
| VRAM 16GB / Mac 16GB相当(実効11GB) | 96 / 190 |
| VRAM 24GB / Mac 24GB相当(実効16GB) | 113 / 190 |
| VRAM 32GB / Mac 32GB相当(実効21GB) | 151 / 190 |
| Mac 48GB相当(実効36GB) | 154 / 190 |
| Mac 64GB相当(実効48GB) | 165 / 190 |
| Mac 128GB相当(実効96GB) | 177 / 190 |
IQ4_XSでの必要メモリ一覧(190モデル)
ファイルサイズはHugging Faceの実サイズ、必要メモリはそれにKVキャッシュ(8,192トークン)と計算バッファを足した値です。
| モデル | パラメータ | ファイル | 必要メモリ | 動く最小のGPU | 動く最小のMac |
|---|---|---|---|---|---|
| Gemma 3 270M | 0.27B | 0.2GB | 0.8GB | VRAM 4GB〜 | 8GB〜 |
| Qwen2.5 0.5B | 0.49B | 0.3GB | 0.9GB | VRAM 4GB〜 | 8GB〜 |
| Qwen3.5 0.8B | 0.77B | 0.5GB | 1.1GB | VRAM 4GB〜 | 8GB〜 |
| Gemma 3 1B | 1B | 0.7GB | 1.2GB | VRAM 4GB〜 | 8GB〜 |
| Sarashina2.2 0.5B | 0.79B | 0.4GB | 1.4GB | VRAM 4GB〜 | 8GB〜 |
| Llama 3.2 1B | 1.24B | 0.7GB | 1.5GB | VRAM 4GB〜 | 8GB〜 |
| TinySwallow 1.5B | 1.54B | 0.8GB | 1.6GB | VRAM 4GB〜 | 8GB〜 |
| RakutenAI-2.0 mini | 1.53B | 0.8GB | 1.7GB | VRAM 4GB〜 | 8GB〜 |
| EXAONE 4.0 1.2B | 1.28B | 0.7GB | 1.7GB | VRAM 4GB〜 | 8GB〜 |
| Qwen3 0.6B | 0.6B | 0.3GB | 1.7GB | VRAM 4GB〜 | 8GB〜 |
| Qwen3.5 2B | 1.94B | 1.2GB | 1.8GB | VRAM 4GB〜 | 8GB〜 |
| Sarashina2.2 1B | 1.41B | 0.8GB | 1.9GB | VRAM 4GB〜 | 8GB〜 |
| LFM2.5-VL 3B | 2.7B | 1.4GB | 2.1GB | VRAM 4GB〜 | 8GB〜 |
| LFM2.5 2.6B | 2.7B | 1.4GB | 2.1GB | VRAM 4GB〜 | 8GB〜 |
| MiniCPM5 2B | 2.52B | 1.4GB | 2.2GB | VRAM 4GB〜 | 8GB〜 |
| Qwen3 1.7B | 1.72B | 0.9GB | 2.3GB | VRAM 4GB〜 | 8GB〜 |
| Qwen3-VL 2B | 1.72B | 0.9GB | 2.3GB | VRAM 4GB〜 | 8GB〜 |
| Qwen2.5-VL 3B | 3.09B | 1.6GB | 2.4GB | VRAM 4GB〜 | 8GB〜 |
| Qwen2.5 3B | 3.09B | 1.6GB | 2.4GB | VRAM 4GB〜 | 8GB〜 |
| Qwen2.5-Coder 3B | 3.09B | 1.6GB | 2.4GB | VRAM 4GB〜 | 8GB〜 |
| Gemma 2 Baku 2B | 2.61B | 1.5GB | 2.6GB | VRAM 4GB〜 | 8GB〜 |
| SmolLM3 3B | 3.08B | 1.6GB | 2.7GB | VRAM 4GB〜 | 8GB〜 |
| Gemma 3 4B | 3.88B | 2.1GB | 2.9GB | VRAM 4GB〜 | 8GB〜 |
| LLM-jp-3.1 1.8B | 1.87B | 1.0GB | 3.0GB | VRAM 4GB〜 | 8GB〜 |
| Nemotron 3 Nano 4B | 3.97B | 2.4GB | 3.1GB | VRAM 4GB〜 | 8GB〜 |
| Granite 4.2 3B | 3.66B | 1.9GB | 3.1GB | VRAM 4GB〜 | 8GB〜 |
| Qwen3.5 4B | 4.21B | 2.3GB | 3.1GB | VRAM 4GB〜 | 8GB〜 |
| Llama 3.2 3B | 3.21B | 1.7GB | 3.1GB | VRAM 4GB〜 | 8GB〜 |
| AREX-Turbo 4B | 4.21B | 2.4GB | 3.2GB | VRAM 4GB〜 | 8GB〜 |
| Fara1.5 4B | 4.21B | 2.4GB | 3.2GB | VRAM 4GB〜 | 8GB〜 |
| Ministral 3 3B | 3.43B | 1.8GB | 3.2GB | VRAM 4GB〜 | 8GB〜 |
| Gemma 3n E2B | 4.46B | 2.7GB | 3.4GB | VRAM 4GB〜 | 8GB〜 |
| Gemma 4 E2B | 4.65B | 2.8GB | 3.5GB | VRAM 4GB〜 | 8GB〜 |
| AFM-4.5B | 4.62B | 2.4GB | 3.5GB | VRAM 6GB〜 | 8GB〜 |
| Nanbeige4.2 3B | 4.17B | 2.3GB | 3.5GB | VRAM 6GB〜 | 8GB〜 |
| Sarashina2.2 3B | 3.36B | 1.7GB | 3.5GB | VRAM 6GB〜 | 8GB〜 |
| Phi-4-mini 3.8B | 3.84B | 2.1GB | 3.6GB | VRAM 6GB〜 | 8GB〜 |
| Qwen3 4B | 4.02B | 2.1GB | 3.8GB | VRAM 6GB〜 | 8GB〜 |
| Qwen3-VL 4B | 4.02B | 2.1GB | 3.8GB | VRAM 6GB〜 | 8GB〜 |
| Granite 4.0 H-Tiny | 6.94B | 3.5GB | 4.2GB | VRAM 6GB〜 | 8GB〜 |
| LFM2.5 8B-A1B | 8.47B | 4.0GB | 4.7GB | VRAM 6GB〜 | 8GB〜 |
| Gemma 3n E4B | 6.87B | 4.0GB | 4.7GB | VRAM 6GB〜 | 8GB〜 |
| Ling 3.0 tiny | 7.89B | 4.1GB | 4.8GB | VRAM 6GB〜 | 8GB〜 |
| Falcon-H1R 7B | 7.59B | 3.9GB | 4.8GB | VRAM 6GB〜 | 8GB〜 |
| DeepSeek-R1 Distill Qwen 7B | 7.62B | 3.9GB | 5.0GB | VRAM 6GB〜 | 8GB〜 |
| ELYZA-Shortcut-1.0 Qwen 7B | 7.62B | 3.9GB | 5.0GB | VRAM 6GB〜 | 8GB〜 |
| ABEJA Qwen2.5 7B Japanese | 7.62B | 3.9GB | 5.0GB | VRAM 6GB〜 | 8GB〜 |
| Qwen2.5 7B | 7.62B | 3.9GB | 5.0GB | VRAM 6GB〜 | 8GB〜 |
| Qwen2.5-Coder 7B | 7.62B | 3.9GB | 5.0GB | VRAM 6GB〜 | 8GB〜 |
| Qwen2.5-VL 7B | 7.62B | 3.9GB | 5.0GB | VRAM 6GB〜 | 8GB〜 |
| Mistral 7B v0.3 | 7.25B | 3.6GB | 5.3GB | VRAM 6GB〜 | 8GB〜 |
| Gemma 4 E4B | 7.52B | 4.4GB | 5.3GB | VRAM 6GB〜 | 8GB〜 |
| CAT-Translate 7B | 7.49B | 3.8GB | 5.4GB | VRAM 6GB〜 | 16GB〜 |
| Tanuki-8B | 7.51B | 3.8GB | 5.4GB | VRAM 6GB〜 | 16GB〜 |
| Phi-3.5-mini 3.8B | 3.82B | 1.9GB | 5.5GB | VRAM 6GB〜 | 16GB〜 |
| Hunyuan 7B | 7.5B | 3.9GB | 5.5GB | VRAM 6GB〜 | 16GB〜 |
| Command R7B | 8.03B | 4.3GB | 5.5GB | VRAM 8GB〜 | 16GB〜 |
| Nemotron-Nano 9B v2 Japanese | 8.89B | 4.9GB | 5.7GB | VRAM 8GB〜 | 16GB〜 |
| Qwen3.5 9B | 8.95B | 4.8GB | 5.7GB | VRAM 8GB〜 | 16GB〜 |
| MiMo-V2.6-Distill-Qwen-9B | 8.95B | 4.9GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| Llama 3.1 Swallow 8B | 8.03B | 4.1GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| DeepSeek-R1 Distill Llama 8B | 8.03B | 4.1GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| Llama 3.1 8B | 8.03B | 4.1GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| UI-Venus-2 9B | 8.95B | 4.9GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| Ornith 1.5 9B | 8.95B | 4.9GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| UI-Mate 9B | 8.95B | 4.9GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| Fara1.5 9B | 8.95B | 4.9GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| Apertus 8B | 8.05B | 4.2GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| Llama 3 Youko 8B | 8.03B | 4.2GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| Ornith 1.0 9B | 8.95B | 4.9GB | 5.8GB | VRAM 8GB〜 | 16GB〜 |
| GLM-4.6V-Flash 9B | 9.4B | 4.9GB | 5.9GB | VRAM 8GB〜 | 16GB〜 |
| Aya Expanse 8B | 8.03B | 4.3GB | 5.9GB | VRAM 8GB〜 | 16GB〜 |
| Qwen3 8B | 8.19B | 4.2GB | 6.0GB | VRAM 8GB〜 | 16GB〜 |
| Shisa V2.1 Qwen3 8B | 8.19B | 4.2GB | 6.0GB | VRAM 8GB〜 | 16GB〜 |
| Qwen3-Swallow 8B | 8.19B | 4.2GB | 6.0GB | VRAM 8GB〜 | 16GB〜 |
| DeepSeek-R1-0528 Qwen3 8B | 8.19B | 4.3GB | 6.0GB | VRAM 8GB〜 | 16GB〜 |
| Qwen3-VL 8B | 8.19B | 4.3GB | 6.0GB | VRAM 8GB〜 | 16GB〜 |
| Ministral 3 8B | 8.49B | 4.4GB | 6.1GB | VRAM 8GB〜 | 16GB〜 |
| LLM-jp-4 8B thinking | 8.59B | 4.5GB | 6.1GB | VRAM 8GB〜 | 16GB〜 |
| Granite 4.2 8B | 8.79B | 4.6GB | 6.5GB | VRAM 8GB〜 | 16GB〜 |
| Gemma 4 12B | 11.91B | 5.9GB | 7.1GB | VRAM 8GB〜 | 16GB〜 |
| Nemotron Nano 12B v2 | 12.31B | 6.3GB | 7.2GB | VRAM 8GB〜 | 16GB〜 |
| Gemma 2 9B | 9.24B | 4.8GB | 7.4GB | VRAM 8GB〜 | 16GB〜 |
| Gemma-2-Llama-Swallow 9B | 9.24B | 4.8GB | 7.4GB | VRAM 8GB〜 | 16GB〜 |
| Gemma 3 12B | 11.77B | 6.1GB | 7.6GB | VRAM 10GB〜 | 16GB〜 |
| Mistral Nemo 12B | 12.25B | 6.3GB | 8.2GB | VRAM 10GB〜 | 16GB〜 |
| Mistral Nemo Japanese 12B | 12.25B | 6.3GB | 8.2GB | VRAM 10GB〜 | 16GB〜 |
| Ministral 3 14B | 13.51B | 6.9GB | 8.9GB | VRAM 10GB〜 | 16GB〜 |
| Qwen3 14B | 14.77B | 7.6GB | 9.5GB | VRAM 11GB〜 | 16GB〜 |
| ABEJA Qwen3 14B Agentic | 14.77B | 7.6GB | 9.5GB | VRAM 11GB〜 | 16GB〜 |
| Phi-4 14B | 14.66B | 7.4GB | 9.7GB | VRAM 11GB〜 | 16GB〜 |
| Shisa V2.1 unphi4 14B | 14.66B | 7.5GB | 9.8GB | VRAM 11GB〜 | 16GB〜 |
| DeepSeek-R1 Distill Qwen 14B | 14.77B | 7.6GB | 9.8GB | VRAM 11GB〜 | 16GB〜 |
| DeepSeek-R1 Distill Qwen 14B Japanese | 14.77B | 7.6GB | 9.8GB | VRAM 11GB〜 | 16GB〜 |
| Qwen2.5 14B | 14.77B | 7.6GB | 9.8GB | VRAM 11GB〜 | 16GB〜 |
| Qwen2.5-Coder 14B | 14.77B | 7.6GB | 9.8GB | VRAM 11GB〜 | 16GB〜 |
| ERNIE 4.5 21B-A3B Thinking | 21.83B | 11GB | 12GB | VRAM 16GB〜 | 24GB〜 |
| GPT-OSS-Swallow 20B | 20.91B | 11GB | 12GB | VRAM 16GB〜 | 24GB〜 |
| Codestral 22B | 22.25B | 11GB | 14GB | VRAM 16GB〜 | 24GB〜 |
| LLM-jp-3.1 13B | 13.71B | 6.9GB | 14GB | VRAM 16GB〜 | 24GB〜 |
| Gemma 4 26B-A4B | 25.23B | 13GB | 14GB | VRAM 16GB〜 | 24GB〜 |
| Mistral Small 3.2 24B | 23.57B | 12GB | 14GB | VRAM 16GB〜 | 24GB〜 |
| Devstral Small 2 24B | 23.57B | 12GB | 14GB | VRAM 16GB〜 | 24GB〜 |
| Magistral Small 2509 | 23.57B | 12GB | 14GB | VRAM 16GB〜 | 24GB〜 |
| Devstral Small 2507 | 23.57B | 12GB | 14GB | VRAM 16GB〜 | 24GB〜 |
| Qwen3.8 27B | 27.32B | 13GB | 15GB | VRAM 16GB〜 | 24GB〜 |
| Qwen3.5 27B | 26.9B | 14GB | 15GB | VRAM 16GB〜 | 24GB〜 |
| North Mini Code 1.0 | 30.48B | 14GB | 16GB | VRAM 20GB〜 | 24GB〜 |
| AREX-2 27B | 26.9B | 14GB | 16GB | VRAM 20GB〜 | 24GB〜 |
| Gemma 3 27B | 27.01B | 14GB | 16GB | VRAM 20GB〜 | 24GB〜 |
| Fara1.5 27B | 26.9B | 14GB | 16GB | VRAM 20GB〜 | 24GB〜 |
| UI-Mate 27B | 26.9B | 14GB | 16GB | VRAM 20GB〜 | 24GB〜 |
| Qwen3.6 27B | 26.9B | 14GB | 16GB | VRAM 20GB〜 | 24GB〜 |
| Gemma-2-Llama-Swallow 27B | 27.23B | 14GB | 17GB | VRAM 20GB〜 | 32GB〜 |
| GLM-4.7-Flash 30B-A3B | 29.94B | 15GB | 17GB | VRAM 20GB〜 | 32GB〜 |
| Qwen3-Swallow 30B-A3B | 30.53B | 15GB | 17GB | VRAM 20GB〜 | 32GB〜 |
| Qwen3 30B-A3B | 30.53B | 15GB | 17GB | VRAM 20GB〜 | 32GB〜 |
| Qwen3-VL 30B-A3B | 30.53B | 15GB | 17GB | VRAM 20GB〜 | 32GB〜 |
| Qwen3-Coder 30B-A3B | 30.53B | 15GB | 17GB | VRAM 20GB〜 | 32GB〜 |
| Granite 4.0 H-Small 32B-A9B | 32.21B | 16GB | 17GB | VRAM 20GB〜 | 32GB〜 |
| Qwen3.5 35B-A3B | 34.66B | 16GB | 17GB | VRAM 20GB〜 | 32GB〜 |
| Gemma 4 31B | 30.7B | 15GB | 18GB | VRAM 20GB〜 | 32GB〜 |
| Qwen3.6 35B-A3B | 34.66B | 17GB | 18GB | VRAM 20GB〜 | 32GB〜 |
| Ornith 1.0 35B-A3B | 34.66B | 17GB | 18GB | VRAM 20GB〜 | 32GB〜 |
| Qwen-AgentWorld 35B-A3B | 34.66B | 17GB | 18GB | VRAM 20GB〜 | 32GB〜 |
| Granite 4.2 30B | 29.28B | 15GB | 18GB | VRAM 20GB〜 | 32GB〜 |
| EXAONE 4.0.1 32B | 32B | 16GB | 18GB | VRAM 20GB〜 | 32GB〜 |
| Laguna XS 2.1 33B-A3B | 33.44B | 17GB | 18GB | VRAM 20GB〜 | 32GB〜 |
| Olmo 3.1 32B | 32.23B | 16GB | 18GB | VRAM 20GB〜 | 32GB〜 |
| XYZ-Aquila mini 35B-A3B | 34.66B | 18GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| KAT-Coder-V2.5-Dev 35B-A3B | 34.66B | 18GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Thomson 1.0 Small 35B-A3B | 34.66B | 18GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Aya Expanse 32B | 32.3B | 17GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Ornith 1.5 35B-A3B | 35.51B | 18GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| BigBang v1 35B | 35.51B | 18GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Nemotron 3 Nano Omni 30B-A3B | 31.58B | 18GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Qwen3 32B | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| DeepSeek-R1 Distill Qwen 32B | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| ELYZA-Thinking-1.0 Qwen 32B | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| DeepSeek-R1 Distill Qwen 32B Japanese | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| ELYZA-Shortcut-1.0 Qwen 32B | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Qwen2.5 32B | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Qwen2.5-Coder 32B | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| ABEJA Qwen2.5 32B Japanese | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| KARAKURI LM 32B Thinking | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Qwen3-VL 32B | 32.76B | 16GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Qwen2.5-VL 32B | 32.76B | 17GB | 19GB | VRAM 20GB〜 | 32GB〜 |
| Nex-N2.5-mini | 34.66B | 19GB | 20GB | VRAM 24GB〜 | 32GB〜 |
| Holo4 35B-A3B | 34.66B | 19GB | 20GB | VRAM 24GB〜 | 32GB〜 |
| LLM-jp-4 33B thinking | 33.22B | 17GB | 20GB | VRAM 24GB〜 | 32GB〜 |
| Seed-OSS 36B | 36.15B | 18GB | 21GB | VRAM 24GB〜 | 32GB〜 |
| RakutenAI-2.0 8x7B | 46.83B | 23GB | 26GB | VRAM 32GB〜 | 48GB〜 |
| Tanuki-8x8B | 46.97B | 24GB | 26GB | VRAM 32GB〜 | 48GB〜 |
| Kimi Linear 48B-A3B | 49.12B | 25GB | 26GB | VRAM 32GB〜 | 48GB〜 |
| Llama 3 Youko 70B | 70.55B | 35GB | 39GB | VRAM 48GB〜 | 64GB〜 |
| Llama 3.1 70B Japanese | 70.55B | 35GB | 39GB | VRAM 48GB〜 | 64GB〜 |
| Llama 3.3 Swallow 70B | 70.55B | 35GB | 39GB | VRAM 48GB〜 | 64GB〜 |
| DeepSeek-R1 Distill Llama 70B | 70.55B | 35GB | 39GB | VRAM 48GB〜 | 64GB〜 |
| Llama 3.1 70B | 70.55B | 35GB | 39GB | VRAM 48GB〜 | 64GB〜 |
| Llama 3.3 70B | 70.55B | 35GB | 39GB | VRAM 48GB〜 | 64GB〜 |
| Shisa V2.1 Llama 3.3 70B | 70.55B | 35GB | 39GB | VRAM 48GB〜 | 64GB〜 |
| Qwen2.5 72B | 72.71B | 37GB | 41GB | VRAM 48GB〜 | 64GB〜 |
| Qwen3-Next 80B-A3B | 79.67B | 40GB | 42GB | VRAM 48GB〜 | 64GB〜 |
| Qwen3-Coder-Next 80B-A3B | 79.67B | 40GB | 42GB | VRAM 48GB〜 | 64GB〜 |
| Hunyuan-A13B 80B | 80.39B | 41GB | 43GB | VRAM 48GB〜 | 64GB〜 |
| Laguna S 2.1 118B-A8B | 117.56B | 54GB | 56GB | 不可 | 96GB〜 |
| Mistral Small 4 119B | 118.97B | 54GB | 57GB | 不可 | 96GB〜 |
| Llama 4 Scout 17B-16E | 107.77B | 54GB | 57GB | 不可 | 96GB〜 |
| Qwen3.5 122B-A10B | 122.11B | 56GB | 58GB | 不可 | 96GB〜 |
| Command A 111B | 111.06B | 56GB | 59GB | 不可 | 96GB〜 |
| GLM-4.5-Air 106B-A12B | 110.47B | 56GB | 60GB | 不可 | 96GB〜 |
| GPT-OSS-Swallow 120B | 116.83B | 62GB | 64GB | 不可 | 96GB〜 |
| Ling 3.0 flash | 127.49B | 64GB | 67GB | 不可 | 96GB〜 |
| Devstral 2 123B | 125.03B | 63GB | 68GB | 不可 | 96GB〜 |
| Mixtral 8x22B | 140.63B | 71GB | 75GB | 不可 | 128GB〜 |
| Qwen3.8-Flash-Next | 176.94B | 87GB | 91GB | 不可 | 128GB〜 |
| Step-3.7-Flash | 196.96B | 89GB | 92GB | 不可 | 128GB〜 |
| MiniMax-M2.5 229B-A10B | 228.69B | 114GB | 119GB | 不可 | 192GB〜 |
| Qwen3 235B-A22B | 235.09B | 117GB | 122GB | 不可 | 192GB〜 |
| Inkling Small 264B | 263.66B | 119GB | 123GB | 不可 | 192GB〜 |
| DeepSeek-V4-Flash | 284.33B | 127GB | 132GB | 不可 | 192GB〜 |
| GLM-5.3-Flash | 320.76B | 146GB | 151GB | 不可 | 256GB〜 |
| ERNIE 4.5 300B-A47B | 299.48B | 149GB | 155GB | 不可 | 256GB〜 |
| Hy3 295B-A21B | 298.79B | 150GB | 157GB | 不可 | 256GB〜 |
| Qwen3.5 397B-A17B | 396.35B | 177GB | 183GB | 不可 | 256GB〜 |
| GLM-4.5 355B-A32B | 358.34B | 178GB | 187GB | 不可 | 256GB〜 |
| Llama 4 Maverick 17B-128E | 400.71B | 200GB | 208GB | 不可 | 512GB〜 |
| Qwen3-Coder 480B-A35B | 480.15B | 243GB | 252GB | 不可 | 512GB〜 |
| Mistral Large 3 675B | 673.42B | 335GB | 347GB | 不可 | 512GB〜 |
| GLM-5.3 | 753.86B | 340GB | 352GB | 不可 | 512GB〜 |
他の形式との比較
| 形式 | 平均ビット数 | IQ4_XSに対するサイズ | 位置づけ |
|---|---|---|---|
| Q4_K_M | 4.8 | 112% | ローカルLLMで最も広く使われている量子化です |
| IQ4_XS(このページ) | 4.3 | 100% | Q4_K_Mより1割ほど小さい4bit量子化です |
| Q5_K_M | 5.7 | 133% | 4bitより一段品質に寄せた5bit量子化です |
| Q6_K | 6.6 | 153% | 6bit量子化 |
| Q8_0 | 8.5 | 198% | 8bit量子化 |
| Q3_K_M | 3.9 | 91% | 3bit量子化 |
| Q2_K | 2.6 | 60% | 2bit量子化 |
| MXFP4 | 4.25 | 99% | OpenAIのgpt-ossシリーズなどが採用する4bit形式です |
よくある質問
IQ4_XSとは何ですか?
IQ系はimportance matrix(重要度行列)を使う量子化で、事前に流したテキストで重みごとの重要度を測り、重要な部分により多くのビットを割り当てます。XSはextra small。平均4.3ビット前後で、Q4_K_Mより10%前後小さくなります。生成時の計算はQ4_K_Mよりわずかに重く、CPU実行では速度差が出ることがあります。
IQ4_XSで品質はどれくらい落ちますか?
同じ4bit帯なのでQ4_K_Mに近い水準です。ファイルが小さいぶん、VRAM 16GBに27Bクラスを載せる、といった「ぎりぎりの一手」で価値があります。
IQ4_XSはどんなときに選びますか?
Q4_K_Mが数GB溢れるとき。当サイトの機種別ページの「量子化を落とせば収まるモデル」で、この形式が選ばれることが多くあります。