GeForce RTX 3080 10GB で動くローカルLLM一覧(2026年10月)
編集部の見立て
10GBという半端な容量が、この上位カードを扱いにくくしています。Mistral Nemo Japanese 12BのQ4_K_M(必要8.9GB)はベンチマークで補正した推定で65.5tok/sと速い。その一方で、Qwen3 14Bの4bitはあと0.9GB、Shisa V2.1 unphi4 14Bはあと1.1GBで届きません。
14B級はMinistral 3 14BをIQ4_XS(必要8.9GB)に落としてようやく収まる容量です。12B級を速く回したい人なら不満は出にくく、14B級を使いたい人には向きません。
まず試すなら: Gemma 4 12B(5bit(Q5_K_M)・必要9.0GB・約62 tok/s補正済み)。VRAM 12GBで日本語が上手い2026年版。Gemma 3 12Bの後継
足りないのは: Qwen3 14Bを動かすにはVRAMがあと約0.9GB必要(必要10GB / 実効9.5GB)。はみ出した分をPCのメモリに逃がせば(CPUオフロード)動きますが、速度は数分の一になります。
- ぴったりRTX 5070(12GB)デスクトップ・メモリ32GB目安 20〜28万円
- 余裕を持つならRTX 5070 Ti(16GB)デスクトップ・メモリ32GB目安 28〜38万円
- 別の形ならMac mini M4 Pro(メモリ48GB・SSD 1TB)目安 30〜36万円
VRAMに収まるモデル
収まる量子化のうち、いちばん精度の高いもので表示しています(速度は推定・計算方法)。
快適 この機種では、VRAMに収まる101本がすべて「快適」に入ります。
| モデル | 量子化 | 必要 | 推定速度 |
|---|---|---|---|
| Gemma 3 270M | 8bit(Q8_0) | 0.8GB | 約1730 tok/s補正済み |
| Qwen2.5 0.5B | 8bit(Q8_0) | 1.1GB | 約920 tok/s補正済み |
| Qwen3.5 0.8B | 8bit(Q8_0) | 1.4GB | 約600 tok/s補正済み |
| Gemma 3 1B | 8bit(Q8_0) | 1.6GB | 約490 tok/s補正済み |
| Sarashina2.2 0.5B | 8bit(Q8_0) | 1.8GB | 約490 tok/s補正済み |
| Qwen3 0.6B | 8bit(Q8_0) | 2.0GB | 約480 tok/s補正済み |
| LFM2.5 1.2B JP | 8bit(Q8_0) | 1.8GB | 約410 tok/s補正済み |
| Llama 3.2 1B | 8bit(Q8_0) | 2.0GB | 約370 tok/s補正済み |
| EXAONE 4.0 1.2B | 8bit(Q8_0) | 2.3GB | 約330 tok/s補正済み |
| TinySwallow 1.5B | 8bit(Q8_0) | 2.3GB | 約300 tok/s補正済み |
| RakutenAI-2.0 mini | 8bit(Q8_0) | 2.4GB | 約290 tok/s補正済み |
| Sarashina2.2 1B | 8bit(Q8_0) | 2.6GB | 約290 tok/s補正済み |
| Qwen2.5 1.5B | 8bit(Q8_0) | 2.5GB | 約270 tok/s補正済み |
| Qwen3.5 2B | 8bit(Q8_0) | 2.6GB | 約250 tok/s補正済み |
| ERNIE 4.5 21B-A3B Thinking | 2bit(Q2_K) | 8.8GB | 約240 tok/s補正済み |
| Qwen3-VL 2B | 8bit(Q8_0) | 3.1GB | 約230 tok/s補正済み |
| Qwen3 1.7B | 8bit(Q8_0) | 3.1GB | 約230 tok/s補正済み |
| Ling 3.0 tiny | 8bit(Q8_0) | 8.7GB | 約220 tok/s補正済み |
| LFM2.5 8B-A1B | 8bit(Q8_0) | 9.2GB | 約190 tok/s補正済み |
| LLM-jp-3.1 1.8B | 8bit(Q8_0) | 3.9GB | 約190 tok/s補正済み |
| MiniCPM5 2B | 8bit(Q8_0) | 3.4GB | 約190 tok/s補正済み |
| LFM2.5 2.6B | 8bit(Q8_0) | 3.4GB | 約180 tok/s補正済み |
| LFM2.5-VL 3B | 8bit(Q8_0) | 3.4GB | 約180 tok/s補正済み |
| Gemma 2 Baku 2B | 8bit(Q8_0) | 3.8GB | 約170 tok/s補正済み |
| Qwen2.5-VL 3B | 8bit(Q8_0) | 3.9GB | 約160 tok/s補正済み |
| Qwen2.5-Coder 3B | 8bit(Q8_0) | 3.9GB | 約160 tok/s補正済み |
| Qwen2.5 3B | 8bit(Q8_0) | 3.9GB | 約160 tok/s補正済み |
| SmolLM3 3B | 8bit(Q8_0) | 4.2GB | 約150 tok/s補正済み |
| Llama 3.2 3B | 8bit(Q8_0) | 4.7GB | 約140 tok/s補正済み |
| Ministral 3 3B | 8bit(Q8_0) | 4.8GB | 約130 tok/s補正済み |
| Granite 4.2 3B | 8bit(Q8_0) | 4.9GB | 約130 tok/s補正済み |
| Sarashina2.2 3B | 8bit(Q8_0) | 5.2GB | 約130 tok/s補正済み |
| Gemma 3 4B | 8bit(Q8_0) | 4.7GB | 約120 tok/s補正済み |
| Nemotron 3 Nano 4B | 8bit(Q8_0) | 4.7GB | 約120 tok/s補正済み |
| Qwen3.5 4B | 8bit(Q8_0) | 5.0GB | 約120 tok/s補正済み |
| Phi-4-mini 3.8B | 8bit(Q8_0) | 5.4GB | 約120 tok/s補正済み |
| AREX-Turbo 4B | 8bit(Q8_0) | 5.1GB | 約120 tok/s補正済み |
| Fara1.5 4B | 8bit(Q8_0) | 5.1GB | 約120 tok/s補正済み |
| Nanbeige4.2 3B | 8bit(Q8_0) | 5.4GB | 約110 tok/s補正済み |
| Gemma 3n E2B | 8bit(Q8_0) | 5.2GB | 約110 tok/s補正済み |
| Qwen3-VL 4B | 8bit(Q8_0) | 5.7GB | 約110 tok/s補正済み |
| Qwen3 4B | 8bit(Q8_0) | 5.7GB | 約110 tok/s補正済み |
| Gemma 4 E2B | 8bit(Q8_0) | 5.5GB | 約100 tok/s補正済み |
| AFM-4.5B | 8bit(Q8_0) | 5.8GB | 約100 tok/s補正済み |
| Llama-3-ELYZA-JP-8B | 4bit(Q4_K_M) | 6.2GB | 約98 tok/s補正済み |
| Phi-3.5-mini 3.8B | 8bit(Q8_0) | 7.4GB | 約94 tok/s補正済み |
| CAT-Translate 7B | 6bit(Q6_K) | 7.4GB | 約80 tok/s補正済み |
| Llama 3.1 Swallow 8B | 6bit(Q6_K) | 7.8GB | 約75 tok/s補正済み |
| DeepSeek-R1 Distill Llama 8B | 6bit(Q6_K) | 7.8GB | 約75 tok/s補正済み |
| Aya Expanse 8B | 6bit(Q6_K) | 7.8GB | 約75 tok/s補正済み |
| Llama 3 Youko 8B | 6bit(Q6_K) | 7.8GB | 約75 tok/s補正済み |
| Llama 3.1 8B | 6bit(Q6_K) | 7.8GB | 約75 tok/s補正済み |
| Apertus 8B | 6bit(Q6_K) | 7.8GB | 約75 tok/s補正済み |
| Qwen3-Swallow 8B | 6bit(Q6_K) | 8.1GB | 約73 tok/s補正済み |
| Shisa V2.1 Qwen3 8B | 6bit(Q6_K) | 8.1GB | 約73 tok/s補正済み |
| Qwen3-VL 8B | 6bit(Q6_K) | 8.1GB | 約73 tok/s補正済み |
| DeepSeek-R1-0528 Qwen3 8B | 6bit(Q6_K) | 8.1GB | 約73 tok/s補正済み |
| Qwen3 8B | 6bit(Q6_K) | 8.1GB | 約73 tok/s補正済み |
| Granite 4.0 H-Tiny | 8bit(Q8_0) | 7.7GB | 約72 tok/s補正済み |
| Gemma 3n E4B | 8bit(Q8_0) | 7.7GB | 約72 tok/s補正済み |
| Ministral 3 8B | 6bit(Q6_K) | 8.3GB | 約71 tok/s補正済み |
| LLM-jp-4 8B thinking | 6bit(Q6_K) | 8.3GB | 約70 tok/s補正済み |
| Qwen3.5 9B | 6bit(Q6_K) | 7.9GB | 約70 tok/s補正済み |
| Ornith 1.0 9B | 6bit(Q6_K) | 7.9GB | 約70 tok/s補正済み |
| Gemma-2-Llama-Swallow 9B | 5bit(Q5_K_M) | 8.8GB | 約69 tok/s補正済み |
| Gemma 2 9B | 5bit(Q5_K_M) | 8.8GB | 約69 tok/s補正済み |
| Ornith 1.5 9B | 6bit(Q6_K) | 8.1GB | 約68 tok/s補正済み |
| UI-Mate 9B | 6bit(Q6_K) | 8.1GB | 約68 tok/s補正済み |
| UI-Venus-2 9B | 6bit(Q6_K) | 8.1GB | 約68 tok/s補正済み |
| Fara1.5 9B | 6bit(Q6_K) | 8.1GB | 約68 tok/s補正済み |
| MiMo-V2.6-Distill-Qwen-9B | 6bit(Q6_K) | 8.2GB | 約67 tok/s補正済み |
| PLaMo 2 Translate | 6bit(Q6_K) | 8.3GB | 約67 tok/s補正済み |
| ABEJA Qwen3 14B Agentic | 3bit(Q3_K_M) | 8.8GB | 約67 tok/s補正済み |
| Qwen3 14B | 3bit(Q3_K_M) | 8.8GB | 約67 tok/s補正済み |
| Shisa V2.1 unphi4 14B | 3bit(Q3_K_M) | 9.0GB | 約67 tok/s補正済み |
| Ministral 3 14B | 4bit(IQ4_XS) | 8.9GB | 約66 tok/s補正済み |
| DeepSeek-R1 Distill Qwen 14B | 3bit(Q3_K_M) | 9.0GB | 約66 tok/s補正済み |
| DeepSeek-R1 Distill Qwen 14B Japanese | 3bit(Q3_K_M) | 9.0GB | 約66 tok/s補正済み |
| Qwen2.5-Coder 14B | 3bit(Q3_K_M) | 9.0GB | 約66 tok/s補正済み |
| Qwen2.5 14B | 3bit(Q3_K_M) | 9.0GB | 約66 tok/s補正済み |
| Mistral Nemo Japanese 12B | 4bit(Q4_K_M) | 8.9GB | 約66 tok/s補正済み |
| Mistral Nemo 12B | 4bit(Q4_K_M) | 8.9GB | 約66 tok/s補正済み |
| Granite 4.2 8B | 6bit(Q6_K) | 9.0GB | 約65 tok/s補正済み |
| Phi-4 14B | 3bit(Q3_K_M) | 9.1GB | 約65 tok/s補正済み |
| Mistral 7B v0.3 | 8bit(Q8_0) | 8.9GB | 約65 tok/s補正済み |
| Falcon-H1R 7B | 8bit(Q8_0) | 8.6GB | 約65 tok/s補正済み |
| Gemma 4 E4B | 8bit(Q8_0) | 8.6GB | 約64 tok/s補正済み |
| ELYZA-Shortcut-1.0 Qwen 7B | 8bit(Q8_0) | 8.7GB | 約64 tok/s補正済み |
| ABEJA Qwen2.5 7B Japanese | 8bit(Q8_0) | 8.7GB | 約64 tok/s補正済み |
| DeepSeek-R1 Distill Qwen 7B | 8bit(Q8_0) | 8.7GB | 約64 tok/s補正済み |
| Qwen2.5-VL 7B | 8bit(Q8_0) | 8.7GB | 約64 tok/s補正済み |
| Qwen2.5 7B | 8bit(Q8_0) | 8.7GB | 約64 tok/s補正済み |
| Qwen2.5-Coder 7B | 8bit(Q8_0) | 8.7GB | 約64 tok/s補正済み |
| GLM-4.6V-Flash 9B | 6bit(Q6_K) | 8.7GB | 約63 tok/s補正済み |
| Hunyuan 7B | 8bit(Q8_0) | 9.2GB | 約63 tok/s補正済み |
| Tanuki-8B | 8bit(Q8_0) | 9.2GB | 約63 tok/s補正済み |
| Gemma 4 12B | 5bit(Q5_K_M) | 9.0GB | 約62 tok/s補正済み |
| Nemotron Nano 12B v2 | 5bit(Q5_K_M) | 9.1GB | 約60 tok/s補正済み |
| Gemma 3 12B | 5bit(Q5_K_M) | 9.4GB | 約60 tok/s補正済み |
| Command R7B | 8bit(Q8_0) | 9.3GB | 約60 tok/s補正済み |
| Nemotron-Nano 9B v2 Japanese | 6bit(Q6_K) | 9.4GB | 約58 tok/s補正済み |
PCのメモリに一部を逃がせば動く(CPUオフロード・メモリ32GB想定)
| モデル | 量子化 | 必要 | 判定 | 推定速度 |
|---|---|---|---|---|
| AREX-2 27B | 4bit(Q4_K_M) | 18GB | 遅いCPUオフロード | 約4.6 tok/s補正済み |
| Holo4 35B-A3B | 4bit(Q4_K_M) | 22GB | 実用CPUオフロード | 約20 tok/s補正済み |
| Nex-N2.5-mini | 4bit(Q4_K_M) | 22GB | 実用CPUオフロード | 約17 tok/s補正済み |
| BigBang v1 35B | 4bit(Q4_K_M) | 22GB | 実用CPUオフロード | 約18 tok/s補正済み |
| Granite 4.2 30B | 4bit(Q4_K_M) | 20GB | 遅いCPUオフロード | 約3.8 tok/s補正済み |
| LLM-jp-4 33B thinking | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.2 tok/s補正済み |
| Muse-Glimmer 30B | 2bit(IQ2_M) | 12GB | 実用CPUオフロード | 約11 tok/s補正済み |
| Ornith 1.5 35B-A3B | 4bit(Q4_K_M) | 22GB | 快適CPUオフロード | 約21 tok/s補正済み |
| Qwen3.8 27B | 4bit(Q4_K_M) | 17GB | 遅いCPUオフロード | 約5.1 tok/s補正済み |
| Thomson 1.0 Small 35B-A3B | 4bit(Q4_K_M) | 21GB | 実用CPUオフロード | 約18 tok/s補正済み |
| UI-Mate 27B | 4bit(Q4_K_M) | 18GB | 遅いCPUオフロード | 約4.5 tok/s補正済み |
| Fara1.5 27B | 4bit(Q4_K_M) | 18GB | 遅いCPUオフロード | 約4.5 tok/s補正済み |
| Gemma 4 26B-A4B | 4bit(Q4_K_M) | 17GB | 実用CPUオフロード | 約17 tok/s補正済み |
| Gemma 4 31B | 4bit(Q4_K_M) | 19GB | 遅いCPUオフロード | 約3.8 tok/s補正済み |
| KAT-Coder-V2.5-Dev 35B-A3B | 4bit(Q4_K_M) | 21GB | 快適CPUオフロード | 約21 tok/s補正済み |
| Laguna XS 2.1 33B-A3B | 4bit(Q4_K_M) | 21GB | 快適CPUオフロード | 約21 tok/s補正済み |
| Ornith 1.0 35B-A3B | 4bit(Q4_K_M) | 22GB | 快適CPUオフロード | 約20 tok/s補正済み |
| XYZ-Aquila mini 35B-A3B | 4bit(Q4_K_M) | 21GB | 実用CPUオフロード | 約18 tok/s補正済み |
| North Mini Code 1.0 | 4bit(Q4_K_M) | 19GB | 快適CPUオフロード | 約21 tok/s補正済み |
| Qwen-AgentWorld 35B-A3B | 4bit(Q4_K_M) | 22GB | 快適CPUオフロード | 約20 tok/s補正済み |
| Nemotron 3 Nano Omni 30B-A3B | 4bit(Q4_K_M) | 23GB | 実用CPUオフロード | 約17 tok/s補正済み |
| Qwen3.6 27B | 4bit(Q4_K_M) | 17GB | 遅いCPUオフロード | 約4.8 tok/s補正済み |
| Qwen3.6 35B-A3B | 4bit(Q4_K_M) | 22GB | 快適CPUオフロード | 約20 tok/s補正済み |
| LLM-jp-4 32B-A3B thinking | 4bit(Q4_K_M) | 22GB | 実用CPUオフロード | 約18 tok/s補正済み |
| Qwen3.5 27B | 4bit(Q4_K_M) | 17GB | 遅いCPUオフロード | 約4.9 tok/s補正済み |
| Qwen3.5 35B-A3B | 4bit(Q4_K_M) | 22GB | 快適CPUオフロード | 約20 tok/s補正済み |
| GPT-OSS-Swallow 20B | 4bit(Q4_K_M) | 16GB | 実用CPUオフロード | 約19 tok/s補正済み |
| Kimi Linear 48B-A3B | 4bit(Q4_K_M) | 29GB | 実用CPUオフロード | 約18 tok/s補正済み |
| Qwen3-Swallow 30B-A3B | 4bit(Q4_K_M) | 19GB | 実用CPUオフロード | 約19 tok/s補正済み |
| GLM-4.7-Flash 30B-A3B | 4bit(Q4_K_M) | 19GB | 快適CPUオフロード | 約20 tok/s補正済み |
| Devstral Small 2 24B | 4bit(Q4_K_M) | 16GB | 遅いCPUオフロード | 約6.2 tok/s補正済み |
| Olmo 3.1 32B | 4bit(Q4_K_M) | 20GB | 遅いCPUオフロード | 約3.5 tok/s補正済み |
| Granite 4.0 H-Small 32B-A9B | 4bit(Q4_K_M) | 19GB | 遅いCPUオフロード | 約8.0 tok/s補正済み |
| Qwen3-VL 30B-A3B | 4bit(Q4_K_M) | 19GB | 実用CPUオフロード | 約19 tok/s補正済み |
| Qwen3-VL 32B | 4bit(Q4_K_M) | 21GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| Magistral Small 2509 | 4bit(Q4_K_M) | 16GB | 遅いCPUオフロード | 約6.2 tok/s補正済み |
| EXAONE 4.0.1 32B | 4bit(Q4_K_M) | 20GB | 遅いCPUオフロード | 約3.5 tok/s補正済み |
| gpt-oss-20b | 4bit(MXFP4) | 12GB | 快適CPUオフロード | 約39 tok/s補正済み |
| Seed-OSS 36B | 4bit(Q4_K_M) | 23GB | 遅いCPUオフロード | 約2.8 tok/s補正済み |
| Devstral Small 2507 | 4bit(Q4_K_M) | 16GB | 遅いCPUオフロード | 約6.2 tok/s補正済み |
| Qwen3 30B-A3B | 4bit(Q4_K_M) | 19GB | 実用CPUオフロード | 約19 tok/s補正済み |
| Qwen3-Coder 30B-A3B | 4bit(Q4_K_M) | 19GB | 実用CPUオフロード | 約19 tok/s補正済み |
| Mistral Small 3.2 24B | 4bit(Q4_K_M) | 16GB | 遅いCPUオフロード | 約6.2 tok/s補正済み |
| ABEJA Qwen2.5 32B Japanese | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| ELYZA-Shortcut-1.0 Qwen 32B | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| LLM-jp-3.1 13B | 4bit(Q4_K_M) | 15GB | 実用CPUオフロード | 約8.5 tok/s補正済み |
| ELYZA-Thinking-1.0 Qwen 32B | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| Gemma-2-Llama-Swallow 27B | 4bit(Q4_K_M) | 19GB | 遅いCPUオフロード | 約4.3 tok/s補正済み |
| Qwen3 32B | 4bit(Q4_K_M) | 21GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| Gemma 3 27B | 4bit(Q4_K_M) | 17GB | 遅いCPUオフロード | 約4.8 tok/s補正済み |
| Qwen2.5-VL 32B | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| DeepSeek-R1 Distill Qwen 32B | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| DeepSeek-R1 Distill Qwen 32B Japanese | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| KARAKURI LM 32B Thinking | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| RakutenAI-2.0 8x7B | 4bit(Q4_K_M) | 29GB | 遅いCPUオフロード | 約4.1 tok/s補正済み |
| Qwen2.5-Coder 32B | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| Aya Expanse 32B | 4bit(Q4_K_M) | 21GB | 遅いCPUオフロード | 約3.4 tok/s補正済み |
| Qwen2.5 32B | 4bit(Q4_K_M) | 22GB | 遅いCPUオフロード | 約3.3 tok/s補正済み |
| Tanuki-8x8B | 4bit(Q4_K_M) | 29GB | 遅いCPUオフロード | 約4.1 tok/s補正済み |
| Codestral 22B | 4bit(Q4_K_M) | 15GB | 遅いCPUオフロード | 約6.8 tok/s補正済み |
| Mixtral 8x7B | 4bit(Q4_K_M) | 29GB | 遅いCPUオフロード | 約4.1 tok/s補正済み |
動かないモデルと不足分
| モデル | 量子化 | 必要 | 不足 |
|---|---|---|---|
| Nemotron 3.5 Lightning 30B-A3B | 8bit(Q8_0) | 33GB | あと23GB |
| Shisa V2.1 Llama 3.3 70B | 4bit(Q4_K_M) | 44GB | あと34GB |
| Llama 3.3 Swallow 70B | 4bit(Q4_K_M) | 44GB | あと34GB |
| DeepSeek-R1 Distill Llama 70B | 4bit(Q4_K_M) | 44GB | あと34GB |
| Llama 3.3 70B | 4bit(Q4_K_M) | 44GB | あと34GB |
| Llama 3 Youko 70B | 4bit(Q4_K_M) | 44GB | あと34GB |
| Llama 3.1 70B | 4bit(Q4_K_M) | 44GB | あと34GB |
| Llama 3.1 70B Japanese | 4bit(Q4_K_M) | 44GB | あと34GB |
| Qwen3-Next 80B-A3B | 4bit(Q4_K_M) | 47GB | あと38GB |
| Qwen3-Coder-Next 80B-A3B | 4bit(Q4_K_M) | 47GB | あと38GB |
| Qwen2.5 72B | 4bit(Q4_K_M) | 48GB | あと39GB |
| Hunyuan-A13B 80B | 4bit(Q4_K_M) | 49GB | あと39GB |
| Stockmark-2 100B | 4bit(Q4_K_M) | 58GB | あと49GB |
| gpt-oss-120b | 4bit(MXFP4) | 62GB | あと52GB |
| Llama 4 Scout 17B-16E | 4bit(Q4_K_M) | 65GB | あと55GB |
| Command A 111B | 4bit(Q4_K_M) | 66GB | あと57GB |
| Laguna S 2.1 118B-A8B | 4bit(Q4_K_M) | 71GB | あと62GB |
| Mistral Small 4 119B | 4bit(Q4_K_M) | 72GB | あと62GB |
| GLM-4.5-Air 106B-A12B | 4bit(Q4_K_M) | 72GB | あと62GB |
| Qwen3.5 122B-A10B | 4bit(Q4_K_M) | 74GB | あと65GB |
| Devstral 2 123B | 4bit(Q4_K_M) | 75GB | あと66GB |
| Ling 3.0 flash | 4bit(Q4_K_M) | 75GB | あと66GB |
| Mixtral 8x22B | 4bit(Q4_K_M) | 84GB | あと75GB |
| GPT-OSS-Swallow 120B | 4bit(Q4_K_M) | 85GB | あと76GB |
| Qwen3.8-Flash-Next | 4bit(IQ4_XS) | 91GB | あと81GB |
| Step-3.7-Flash | 4bit(Q4_K_M) | 118GB | あと109GB |
| DeepSeek-V4-Flash | 4bit(IQ4_XS) | 132GB | あと123GB |
| MiniMax-M2.5 229B-A10B | 4bit(Q4_K_M) | 135GB | あと126GB |
| Qwen3 235B-A22B | 4bit(Q4_K_M) | 138GB | あと129GB |
| GLM-5.3-Flash | 4bit(IQ4_XS) | 151GB | あと142GB |
| Inkling Small 264B | 4bit(Q4_K_M) | 157GB | あと147GB |
| MiMo-V2.6-Flash-RL | 4bit(MXFP4) | 161GB | あと152GB |
| ERNIE 4.5 300B-A47B | 4bit(Q4_K_M) | 175GB | あと166GB |
| Hy3 295B-A21B | 4bit(Q4_K_M) | 178GB | あと168GB |
| GLM-4.5 355B-A32B | 4bit(Q4_K_M) | 211GB | あと202GB |
| Qwen3.5 397B-A17B | 4bit(Q4_K_M) | 235GB | あと225GB |
| Llama 4 Maverick 17B-128E | 4bit(Q4_K_M) | 235GB | あと225GB |
| Qwen3-Coder 480B-A35B | 4bit(Q4_K_M) | 281GB | あと271GB |
| Kimi K2.6 | 2bit(IQ2_M) | 329GB | あと320GB |
| GLM-5.3 | 4bit(IQ4_XS) | 352GB | あと343GB |
| RakutenAI-3.0 671B-A37B | 4bit(Q4_K_M) | 390GB | あと380GB |
| Mistral Large 3 675B | 4bit(Q4_K_M) | 392GB | あと382GB |
量子化を落とせば収まるモデル
4bitでは溢れても、量子化を落とせばVRAM10GBに収まる10本です。
| モデル | 標準(4bit)だと | 落とすなら | 必要 | 推定速度 |
|---|---|---|---|---|
| ERNIE 4.5 21B-A3B Thinking | 14GB(あと4.2GB足りない) | 2bit(Q2_K) | 8.8GB | 約240 tok/s補正済み |
| ABEJA Qwen3 14B Agentic | 10GB(あと0.9GB足りない) | 3bit(Q3_K_M) | 8.8GB | 約67 tok/s補正済み |
| Qwen3 14B | 10GB(あと0.9GB足りない) | 3bit(Q3_K_M) | 8.8GB | 約67 tok/s補正済み |
| DeepSeek-R1 Distill Qwen 14B | 11GB(あと1.1GB足りない) | 3bit(Q3_K_M) | 9.0GB | 約66 tok/s補正済み |
| DeepSeek-R1 Distill Qwen 14B Japanese | 11GB(あと1.1GB足りない) | 3bit(Q3_K_M) | 9.0GB | 約66 tok/s補正済み |
| Qwen2.5-Coder 14B | 11GB(あと1.1GB足りない) | 3bit(Q3_K_M) | 9.0GB | 約66 tok/s補正済み |
| Qwen2.5 14B | 11GB(あと1.1GB足りない) | 3bit(Q3_K_M) | 9.0GB | 約66 tok/s補正済み |
| Shisa V2.1 unphi4 14B | 11GB(あと1.1GB足りない) | 3bit(Q3_K_M) | 9.0GB | 約67 tok/s補正済み |
| Phi-4 14B | 11GB(あと1.3GB足りない) | 3bit(Q3_K_M) | 9.1GB | 約65 tok/s補正済み |
| Ministral 3 14B | 9.7GB(あと0.1GB足りない) | 4bit(IQ4_XS) | 8.9GB | 約66 tok/s補正済み |
同じVRAM10GBの機種の中での位置
当サイトにはVRAM10GBの機種が2件あります。帯域幅は760GB/sで、この容量では最も速い部類です。2番目のIntel Arc B570(380GB/s)より約100%速い計算になります。この機種のVRAMに収まるのは101本で、すべて快適に動きます。
この機種は公開ベンチマークで速度を補正しているので、表の速度は他機種の係数を流用した推定より当てになります。
この機種は2020年の発売で、いま6年目です。
同じVRAM10GBでも、これより新しい機種が1件あります(最新はIntel Arc B570・2025年)。動くモデルの数は変わらないので、選ぶ基準は価格と、ツールの対応がいつまで続くかになります。
この機種を実際に使うなら
日本語の常用はMistral Nemo Japanese 12BのQ4_K_Mか、Gemma 4 12BのQ5_K_M(必要9GB・推定61.7tok/s)。12B級を5bitで持てるところに、8GBのカードとの差が出ます。コードはQwen2.5-Coder 7BのQ8_0(推定64.1tok/s)。
14B級はIQ4_XSに落としても、DeepSeek-R1 Distill Qwen 14Bで9.8GBと実効9.5GBをわずかに超えます。3bit台まで落とせば収まりますが、当サイトが4bit以上に数えていない形なので、品質の目減りは自分で見極めることになる。
Ollamaで無理に14Bを指定すると、収まらない層がCPU側へ回って速度が大きく落ちます。
買うときの見どころ
同じ名前で12GB版があり、中身はVRAM 12GB・912GB/sの別物です。10GB版から12GB版に替えると4bit以上は92本から100本になり、Qwen3 14B級も動かせるようになります。
中古出品では容量の表記を必ず見ましょう。同じ10GBの比較相手はIntel Arc B570(380GB/s)だけで、こちらはCUDAが使えません。系列の一段上がRTX 3060 12GB(+8本)という並びは、帯域幅が半分以下のカードでも容量で上回ることを表しています。速度を手放してでも14B級を取りにいくか。判断はそこです。
RTX 30シリーズの中での位置
中古市場の主力です。RTX 30シリーズ10機種の中では、容量が小さいほうから5番目です。一段上のGeForce RTX 3060 12GB(VRAM12GB)にすると、4bit以上で動くモデルが8本増えます。
買う前に確認すること: 3090はGDDR6Xの発熱が大きく、基板裏のメモリが特に熱を持ちます。ケースのエアフローを確保できないなら、長時間の推論には向きません。中古なら消費電力にも注意で、システム全体で750W以上の電源が要ります。 シリーズ全体の選び方はRTX 30シリーズでローカルAIはどこまで動くかにまとめています。
この機種で足りるAI用途
| 用途 | 必要な容量 | この機種(10GB) |
|---|---|---|
| Stable Diffusion / SDXL | VRAM 12GB | 動かない あと2GB |
| FLUX / 高品質画像生成 | VRAM 16GB | 動かない あと6GB |
| 動画生成AI(Wan / Hunyuan / LTX) | VRAM 24GB | 動かない あと14GB |
| ローカルLLM(8Bクラス) | VRAM 8GB | 快適 |
| ローカルLLM(27〜32Bクラス) | VRAM 24GB | 動かない あと14GB |
| ローカルLLM(70B〜120B MoE) | VRAM 40GB | 動かない あと30GB |
| 文字起こし(Whisper) | VRAM 6GB | 快適 |
VRAMが同じくらいの他の機種
| 機種 | メモリ | 帯域幅 | 快適に動く数 |
|---|---|---|---|
| GeForce RTX 3080 12GB | 12GB | 912 GB/s | 136 |
| GeForce RTX 3080 Ti | 12GB | 912 GB/s | 136 |
| GeForce RTX 5070 | 12GB | 672 GB/s | 135 |
| GeForce RTX 2080 Ti | 11GB | 616 GB/s | 119 |
| GeForce RTX 3070 Ti | 8GB | 608 GB/s | 101 |
| GeForce RTX 4070 | 12GB | 504 GB/s | 133 |
| GeForce RTX 4070 SUPER | 12GB | 504 GB/s | 133 |
| GeForce RTX 4070 Ti | 12GB | 504 GB/s | 133 |
Qwen3 14Bが動くPC・Macに買い替えるなら
PR: 以下はAmazonアソシエイトの広告リンクを含みます。価格の目安は執筆時点のもので変動します。価格・在庫はリンク先でご確認ください。
RTX 5070(12GB)デスクトップ・メモリ32GB
SDXLの画像生成が快適。14BクラスのローカルLLMがGPUだけで動く
RTX 5070(VRAM 12GB)・メモリ32GB・NVMe 1TB ・ 目安 20〜28万円
要件を満たす中で最も手頃
RTX 5070 Ti(16GB)デスクトップ・メモリ32GB
FLUX、27B級のMoE型、gpt-oss-20bまで。ローカルAIの定番
RTX 5070 Ti(VRAM 16GB)・メモリ32GB・NVMe 2TB・電源750W ・ 目安 28〜38万円
将来の用途拡張(大きなモデル・並列エージェント)に余裕
Mac mini M4 Pro(メモリ48GB・SSD 1TB)
30BクラスのローカルLLMとエージェント並列運用を1台で。コスパの中心
M4 Pro・ユニファイドメモリ48GB・SSD 1TB・帯域273GB/s ・ 目安 30〜36万円
Macで同じ仕事をするなら
この機種の公開ベンチマーク(出典)
RTX 3080 の llama.cpp 公開ベンチマーク(GitHub Discussion): llama-2-7b Q4_0 = 139.65 tok/s。この値からメモリ帯域幅に対する実効係数(70%)を求め、他モデルの速度推定に使っています。
よくある質問
GeForce RTX 3080 10GBでローカルLLMは動く?
動きます。VRAM10GB(実効約9.5GB)に、収録204モデル中101本が収まります。日本語チャットならGemma 4 12B(5bit(Q5_K_M))が推定約62 tok/sです。
GeForce RTX 3080 10GBで動かないモデルは?
Qwen3 14Bは4bitで約10GB必要で、VRAMがあと約0.9GB足りません。