AI PCナビ使うAIと、させたい仕事に合うPC・Macを。
トップ › GPU別 › GeForce RTX 2080 Ti

GeForce RTX 2080 Ti で動くローカルLLM一覧(2026年10月)

108快適(20 tok/s以上)
0実用(8〜20 tok/s)
54メモリに一部を逃がせば動く
42動かない

編集部の見立て

11GBという半端な容量ながら、RTX 20番台でローカルLLMに一番向くカードです。Qwen3 14BをQ4_K_Mで読み込むと必要量は10.4GBで、実効10.5GBの枠にちょうど収まります。補正済みの推定は42.5tok/s。同じ11GBのGTX 1080 Tiは推定24.7tok/sで、収まる100本は同じでも速さは7割増しです。

惜しいのは、DeepSeek-R1 Distill Qwen 14BやShisa V2.1 unphi4 14BがQ4_K_Mではあと0.1GB溢れること。14Bを会話の速さで回したい人が、中古で探す価値のある1枚です。

まず試すなら: ABEJA Qwen3 14B Agentic(4bit(Q4_K_M)・必要10GB・約43 tok/s補正済み)。エージェント用途と256Kの長文対応を名前に掲げた14B。4bitならVRAM 12GBに収まる

足りないのは: gpt-oss-20bを動かすにはVRAMがあと約1.8GB必要(必要12GB / 実効11GB)。はみ出した分をPCのメモリに逃がせば(CPUオフロード)動きますが、速度は数分の一になります。

gpt-oss-20bが動く機種に買い替えるなら

Amazonのリンクと全3台の説明を見る ↓

VRAMに収まるモデル

収まる量子化のうち、いちばん精度の高いもので表示しています(速度は推定・計算方法)。

快適 この機種では、VRAMに収まる108本がすべて「快適」に入ります。

モデル量子化必要推定速度
Gemma 3 270M8bit(Q8_0)0.8GB約1330 tok/s補正済み
Qwen2.5 0.5B8bit(Q8_0)1.1GB約710 tok/s補正済み
Qwen3.5 0.8B8bit(Q8_0)1.4GB約460 tok/s補正済み
Gemma 3 1B8bit(Q8_0)1.6GB約380 tok/s補正済み
Sarashina2.2 0.5B8bit(Q8_0)1.8GB約370 tok/s補正済み
Qwen3 0.6B8bit(Q8_0)2.0GB約370 tok/s補正済み
LFM2.5 1.2B JP8bit(Q8_0)1.8GB約320 tok/s補正済み
Llama 3.2 1B8bit(Q8_0)2.0GB約280 tok/s補正済み
EXAONE 4.0 1.2B8bit(Q8_0)2.3GB約250 tok/s補正済み
TinySwallow 1.5B8bit(Q8_0)2.3GB約230 tok/s補正済み
RakutenAI-2.0 mini8bit(Q8_0)2.4GB約230 tok/s補正済み
Sarashina2.2 1B8bit(Q8_0)2.6GB約220 tok/s補正済み
Qwen2.5 1.5B8bit(Q8_0)2.5GB約200 tok/s補正済み
North Mini Code 1.02bit(IQ2_M)10GB約200 tok/s補正済み
Qwen3.5 2B8bit(Q8_0)2.6GB約190 tok/s補正済み
ERNIE 4.5 21B-A3B Thinking2bit(Q2_K)8.8GB約180 tok/s補正済み
Qwen3-VL 2B8bit(Q8_0)3.1GB約180 tok/s補正済み
Qwen3 1.7B8bit(Q8_0)3.1GB約180 tok/s補正済み
Ling 3.0 tiny8bit(Q8_0)8.7GB約170 tok/s補正済み
LFM2.5 8B-A1B8bit(Q8_0)9.2GB約150 tok/s補正済み
LLM-jp-3.1 1.8B8bit(Q8_0)3.9GB約150 tok/s補正済み
MiniCPM5 2B8bit(Q8_0)3.4GB約140 tok/s補正済み
LFM2.5 2.6B8bit(Q8_0)3.4GB約140 tok/s補正済み
LFM2.5-VL 3B8bit(Q8_0)3.4GB約140 tok/s補正済み
Gemma 4 26B-A4B2bit(IQ2_M)10GB約140 tok/s補正済み
Gemma 2 Baku 2B8bit(Q8_0)3.8GB約130 tok/s補正済み
Qwen2.5-VL 3B8bit(Q8_0)3.9GB約120 tok/s補正済み
Qwen2.5-Coder 3B8bit(Q8_0)3.9GB約120 tok/s補正済み
Qwen2.5 3B8bit(Q8_0)3.9GB約120 tok/s補正済み
SmolLM3 3B8bit(Q8_0)4.2GB約110 tok/s補正済み
Llama 3.2 3B8bit(Q8_0)4.7GB約110 tok/s補正済み
Ministral 3 3B8bit(Q8_0)4.8GB約100 tok/s補正済み
Granite 4.2 3B8bit(Q8_0)4.9GB約97 tok/s補正済み
Sarashina2.2 3B8bit(Q8_0)5.2GB約97 tok/s補正済み
Gemma 3 4B8bit(Q8_0)4.7GB約96 tok/s補正済み
Nemotron 3 Nano 4B8bit(Q8_0)4.7GB約96 tok/s補正済み
Qwen3.5 4B8bit(Q8_0)5.0GB約89 tok/s補正済み
Phi-4-mini 3.8B8bit(Q8_0)5.4GB約89 tok/s補正済み
AREX-Turbo 4B8bit(Q8_0)5.1GB約89 tok/s補正済み
Fara1.5 4B8bit(Q8_0)5.1GB約89 tok/s補正済み
Nanbeige4.2 3B8bit(Q8_0)5.4GB約86 tok/s補正済み
Gemma 3n E2B8bit(Q8_0)5.2GB約85 tok/s補正済み
Qwen3-VL 4B8bit(Q8_0)5.7GB約84 tok/s補正済み
Qwen3 4B8bit(Q8_0)5.7GB約84 tok/s補正済み
Gemma 4 E2B8bit(Q8_0)5.5GB約80 tok/s補正済み
AFM-4.5B8bit(Q8_0)5.8GB約79 tok/s補正済み
Llama-3-ELYZA-JP-8B4bit(Q4_K_M)6.2GB約75 tok/s補正済み
Phi-3.5-mini 3.8B8bit(Q8_0)7.4GB約73 tok/s補正済み
CAT-Translate 7B6bit(Q6_K)7.4GB約62 tok/s補正済み
Shisa V2.1 Qwen3 8B6bit(Q6_K)8.1GB約56 tok/s補正済み
Granite 4.0 H-Tiny8bit(Q8_0)7.7GB約55 tok/s補正済み
Gemma 3n E4B8bit(Q8_0)7.7GB約55 tok/s補正済み
Granite 4.2 8B6bit(Q6_K)9.0GB約50 tok/s補正済み
Mistral 7B v0.38bit(Q8_0)8.9GB約50 tok/s補正済み
Falcon-H1R 7B8bit(Q8_0)8.6GB約50 tok/s補正済み
Gemma 4 E4B8bit(Q8_0)8.6GB約49 tok/s補正済み
ELYZA-Shortcut-1.0 Qwen 7B8bit(Q8_0)8.7GB約49 tok/s補正済み
ABEJA Qwen2.5 7B Japanese8bit(Q8_0)8.7GB約49 tok/s補正済み
DeepSeek-R1 Distill Qwen 7B8bit(Q8_0)8.7GB約49 tok/s補正済み
Qwen2.5-VL 7B8bit(Q8_0)8.7GB約49 tok/s補正済み
Qwen2.5 7B8bit(Q8_0)8.7GB約49 tok/s補正済み
Qwen2.5-Coder 7B8bit(Q8_0)8.7GB約49 tok/s補正済み
Hunyuan 7B8bit(Q8_0)9.2GB約48 tok/s補正済み
Tanuki-8B8bit(Q8_0)9.2GB約48 tok/s補正済み
Gemma-2-Llama-Swallow 9B6bit(Q6_K)9.8GB約48 tok/s補正済み
Gemma 2 9B6bit(Q6_K)9.8GB約48 tok/s補正済み
Phi-4 14B4bit(IQ4_XS)9.7GB約47 tok/s補正済み
Gemma 3 12B5bit(Q5_K_M)9.4GB約46 tok/s補正済み
Command R7B8bit(Q8_0)9.3GB約46 tok/s補正済み
Shisa V2.1 unphi4 14B4bit(IQ4_XS)9.8GB約46 tok/s補正済み
Ministral 3 14B4bit(Q4_K_M)9.7GB約46 tok/s補正済み
DeepSeek-R1 Distill Qwen 14B4bit(IQ4_XS)9.8GB約46 tok/s補正済み
DeepSeek-R1 Distill Qwen 14B Japanese4bit(IQ4_XS)9.8GB約46 tok/s補正済み
Qwen2.5-Coder 14B4bit(IQ4_XS)9.8GB約46 tok/s補正済み
Qwen2.5 14B4bit(IQ4_XS)9.8GB約46 tok/s補正済み
Llama 3.1 Swallow 8B8bit(Q8_0)9.7GB約45 tok/s補正済み
DeepSeek-R1 Distill Llama 8B8bit(Q8_0)9.7GB約45 tok/s補正済み
Aya Expanse 8B8bit(Q8_0)9.7GB約45 tok/s補正済み
Llama 3 Youko 8B8bit(Q8_0)9.7GB約45 tok/s補正済み
Llama 3.1 8B8bit(Q8_0)9.7GB約45 tok/s補正済み
Apertus 8B8bit(Q8_0)9.7GB約45 tok/s補正済み
Codestral 22B2bit(Q2_K)10GB約45 tok/s補正済み
Qwen3-Swallow 8B8bit(Q8_0)10.0GB約44 tok/s補正済み
Qwen3-VL 8B8bit(Q8_0)10.0GB約44 tok/s補正済み
DeepSeek-R1-0528 Qwen3 8B8bit(Q8_0)10.0GB約44 tok/s補正済み
Qwen3 8B8bit(Q8_0)10.0GB約44 tok/s補正済み
Mistral Nemo Japanese 12B5bit(Q5_K_M)10GB約44 tok/s補正済み
Mistral Nemo 12B5bit(Q5_K_M)10GB約44 tok/s補正済み
Nemotron-Nano 9B v2 Japanese8bit(Q8_0)9.7GB約43 tok/s補正済み
Devstral Small 2 24B2bit(Q2_K)10GB約43 tok/s補正済み
Magistral Small 25092bit(Q2_K)10GB約43 tok/s補正済み
Devstral Small 25072bit(Q2_K)10GB約43 tok/s補正済み
Mistral Small 3.2 24B2bit(Q2_K)10GB約43 tok/s補正済み
Ministral 3 8B8bit(Q8_0)10GB約43 tok/s補正済み
MiMo-V2.6-Distill-Qwen-9B8bit(Q8_0)9.9GB約43 tok/s補正済み
Ornith 1.5 9B8bit(Q8_0)9.9GB約43 tok/s補正済み
UI-Mate 9B8bit(Q8_0)9.9GB約43 tok/s補正済み
UI-Venus-2 9B8bit(Q8_0)9.9GB約43 tok/s補正済み
Fara1.5 9B8bit(Q8_0)9.9GB約43 tok/s補正済み
Ornith 1.0 9B8bit(Q8_0)9.9GB約43 tok/s補正済み
LLM-jp-4 8B thinking8bit(Q8_0)10GB約43 tok/s補正済み
Qwen3.5 9B8bit(Q8_0)9.9GB約43 tok/s補正済み
ABEJA Qwen3 14B Agentic4bit(Q4_K_M)10GB約43 tok/s補正済み
Qwen3 14B4bit(Q4_K_M)10GB約43 tok/s補正済み
Gemma 4 12B6bit(Q6_K)10GB約41 tok/s補正済み
GLM-4.6V-Flash 9B8bit(Q8_0)10GB約40 tok/s補正済み
Nemotron Nano 12B v26bit(Q6_K)10GB約40 tok/s補正済み
PLaMo 2 Translate8bit(Q8_0)10GB約40 tok/s補正済み

PCのメモリに一部を逃がせば動く(CPUオフロード・メモリ32GB想定)

モデル量子化必要判定推定速度
AREX-2 27B4bit(Q4_K_M)18GB遅いCPUオフロード約5.0 tok/s補正済み
Holo4 35B-A3B4bit(Q4_K_M)22GB快適CPUオフロード約21 tok/s補正済み
Nex-N2.5-mini4bit(Q4_K_M)22GB実用CPUオフロード約18 tok/s補正済み
BigBang v1 35B4bit(Q4_K_M)22GB実用CPUオフロード約19 tok/s補正済み
Granite 4.2 30B4bit(Q4_K_M)20GB遅いCPUオフロード約4.0 tok/s補正済み
LLM-jp-4 33B thinking4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
Muse-Glimmer 30B2bit(IQ2_M)12GB実用CPUオフロード約14 tok/s補正済み
Ornith 1.5 35B-A3B4bit(Q4_K_M)22GB快適CPUオフロード約22 tok/s補正済み
Qwen3.8 27B4bit(Q4_K_M)17GB遅いCPUオフロード約5.5 tok/s補正済み
Thomson 1.0 Small 35B-A3B4bit(Q4_K_M)21GB実用CPUオフロード約19 tok/s補正済み
UI-Mate 27B4bit(Q4_K_M)18GB遅いCPUオフロード約4.8 tok/s補正済み
Fara1.5 27B4bit(Q4_K_M)18GB遅いCPUオフロード約4.8 tok/s補正済み
Gemma 4 31B4bit(Q4_K_M)19GB遅いCPUオフロード約4.1 tok/s補正済み
KAT-Coder-V2.5-Dev 35B-A3B4bit(Q4_K_M)21GB快適CPUオフロード約23 tok/s補正済み
Laguna XS 2.1 33B-A3B4bit(Q4_K_M)21GB快適CPUオフロード約22 tok/s補正済み
Ornith 1.0 35B-A3B4bit(Q4_K_M)22GB快適CPUオフロード約21 tok/s補正済み
XYZ-Aquila mini 35B-A3B4bit(Q4_K_M)21GB実用CPUオフロード約19 tok/s補正済み
Qwen-AgentWorld 35B-A3B4bit(Q4_K_M)22GB快適CPUオフロード約21 tok/s補正済み
Nemotron 3 Nano Omni 30B-A3B4bit(Q4_K_M)23GB実用CPUオフロード約18 tok/s補正済み
Qwen3.6 27B4bit(Q4_K_M)17GB遅いCPUオフロード約5.3 tok/s補正済み
Qwen3.6 35B-A3B4bit(Q4_K_M)22GB快適CPUオフロード約21 tok/s補正済み
LLM-jp-4 32B-A3B thinking4bit(Q4_K_M)22GB実用CPUオフロード約19 tok/s補正済み
Qwen3.5 27B4bit(Q4_K_M)17GB遅いCPUオフロード約5.3 tok/s補正済み
Qwen3.5 35B-A3B4bit(Q4_K_M)22GB快適CPUオフロード約22 tok/s補正済み
GPT-OSS-Swallow 20B4bit(Q4_K_M)16GB快適CPUオフロード約21 tok/s補正済み
Kimi Linear 48B-A3B4bit(Q4_K_M)29GB実用CPUオフロード約19 tok/s補正済み
Qwen3-Swallow 30B-A3B4bit(Q4_K_M)19GB実用CPUオフロード約20 tok/s補正済み
GLM-4.7-Flash 30B-A3B4bit(Q4_K_M)19GB快適CPUオフロード約22 tok/s補正済み
Olmo 3.1 32B4bit(Q4_K_M)20GB遅いCPUオフロード約3.7 tok/s補正済み
Granite 4.0 H-Small 32B-A9B4bit(Q4_K_M)19GB実用CPUオフロード約8.5 tok/s補正済み
Qwen3-VL 30B-A3B4bit(Q4_K_M)19GB実用CPUオフロード約20 tok/s補正済み
Qwen3-VL 32B4bit(Q4_K_M)21GB遅いCPUオフロード約3.5 tok/s補正済み
EXAONE 4.0.1 32B4bit(Q4_K_M)20GB遅いCPUオフロード約3.8 tok/s補正済み
gpt-oss-20b4bit(MXFP4)12GB快適CPUオフロード約48 tok/s補正済み
Seed-OSS 36B4bit(Q4_K_M)23GB遅いCPUオフロード約3.0 tok/s補正済み
Qwen3 30B-A3B4bit(Q4_K_M)19GB実用CPUオフロード約20 tok/s補正済み
Qwen3-Coder 30B-A3B4bit(Q4_K_M)19GB実用CPUオフロード約20 tok/s補正済み
ABEJA Qwen2.5 32B Japanese4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
ELYZA-Shortcut-1.0 Qwen 32B4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
LLM-jp-3.1 13B4bit(Q4_K_M)15GB実用CPUオフロード約9.6 tok/s補正済み
ELYZA-Thinking-1.0 Qwen 32B4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
Gemma-2-Llama-Swallow 27B4bit(Q4_K_M)19GB遅いCPUオフロード約4.6 tok/s補正済み
Qwen3 32B4bit(Q4_K_M)21GB遅いCPUオフロード約3.5 tok/s補正済み
Gemma 3 27B4bit(Q4_K_M)17GB遅いCPUオフロード約5.2 tok/s補正済み
Qwen2.5-VL 32B4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
DeepSeek-R1 Distill Qwen 32B4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
DeepSeek-R1 Distill Qwen 32B Japanese4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
KARAKURI LM 32B Thinking4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
RakutenAI-2.0 8x7B4bit(Q4_K_M)29GB遅いCPUオフロード約4.3 tok/s補正済み
Qwen2.5-Coder 32B4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
Aya Expanse 32B4bit(Q4_K_M)21GB遅いCPUオフロード約3.6 tok/s補正済み
Qwen2.5 32B4bit(Q4_K_M)22GB遅いCPUオフロード約3.4 tok/s補正済み
Tanuki-8x8B4bit(Q4_K_M)29GB遅いCPUオフロード約4.2 tok/s補正済み
Mixtral 8x7B4bit(Q4_K_M)29GB遅いCPUオフロード約4.3 tok/s補正済み

動かないモデルと不足分

モデル量子化必要不足
Nemotron 3.5 Lightning 30B-A3B8bit(Q8_0)33GBあと22GB
Shisa V2.1 Llama 3.3 70B4bit(Q4_K_M)44GBあと33GB
Llama 3.3 Swallow 70B4bit(Q4_K_M)44GBあと33GB
DeepSeek-R1 Distill Llama 70B4bit(Q4_K_M)44GBあと33GB
Llama 3.3 70B4bit(Q4_K_M)44GBあと33GB
Llama 3 Youko 70B4bit(Q4_K_M)44GBあと33GB
Llama 3.1 70B4bit(Q4_K_M)44GBあと33GB
Llama 3.1 70B Japanese4bit(Q4_K_M)44GBあと33GB
Qwen3-Next 80B-A3B4bit(Q4_K_M)47GBあと37GB
Qwen3-Coder-Next 80B-A3B4bit(Q4_K_M)47GBあと37GB
Qwen2.5 72B4bit(Q4_K_M)48GBあと38GB
Hunyuan-A13B 80B4bit(Q4_K_M)49GBあと38GB
Stockmark-2 100B4bit(Q4_K_M)58GBあと48GB
gpt-oss-120b4bit(MXFP4)62GBあと51GB
Llama 4 Scout 17B-16E4bit(Q4_K_M)65GBあと54GB
Command A 111B4bit(Q4_K_M)66GBあと56GB
Laguna S 2.1 118B-A8B4bit(Q4_K_M)71GBあと61GB
Mistral Small 4 119B4bit(Q4_K_M)72GBあと61GB
GLM-4.5-Air 106B-A12B4bit(Q4_K_M)72GBあと61GB
Qwen3.5 122B-A10B4bit(Q4_K_M)74GBあと64GB
Devstral 2 123B4bit(Q4_K_M)75GBあと65GB
Ling 3.0 flash4bit(Q4_K_M)75GBあと65GB
Mixtral 8x22B4bit(Q4_K_M)84GBあと74GB
GPT-OSS-Swallow 120B4bit(Q4_K_M)85GBあと75GB
Qwen3.8-Flash-Next4bit(IQ4_XS)91GBあと80GB
Step-3.7-Flash4bit(Q4_K_M)118GBあと108GB
DeepSeek-V4-Flash4bit(IQ4_XS)132GBあと122GB
MiniMax-M2.5 229B-A10B4bit(Q4_K_M)135GBあと125GB
Qwen3 235B-A22B4bit(Q4_K_M)138GBあと128GB
GLM-5.3-Flash4bit(IQ4_XS)151GBあと141GB
Inkling Small 264B4bit(Q4_K_M)157GBあと146GB
MiMo-V2.6-Flash-RL4bit(MXFP4)161GBあと151GB
ERNIE 4.5 300B-A47B4bit(Q4_K_M)175GBあと165GB
Hy3 295B-A21B4bit(Q4_K_M)178GBあと167GB
GLM-4.5 355B-A32B4bit(Q4_K_M)211GBあと201GB
Qwen3.5 397B-A17B4bit(Q4_K_M)235GBあと224GB
Llama 4 Maverick 17B-128E4bit(Q4_K_M)235GBあと224GB
Qwen3-Coder 480B-A35B4bit(Q4_K_M)281GBあと270GB
Kimi K2.62bit(IQ2_M)329GBあと319GB
GLM-5.34bit(IQ4_XS)352GBあと342GB
RakutenAI-3.0 671B-A37B4bit(Q4_K_M)390GBあと379GB
Mistral Large 3 675B4bit(Q4_K_M)392GBあと381GB

量子化を落とせば収まるモデル

4bitでは溢れても、量子化を落とせばVRAM11GBに収まる12本です。

モデル標準(4bit)だと落とすなら必要推定速度
North Mini Code 1.019GB(あと8.9GB足りない)2bit(IQ2_M)10GB約200 tok/s補正済み
Gemma 4 26B-A4B17GB(あと6.6GB足りない)2bit(IQ2_M)10GB約140 tok/s補正済み
Devstral Small 2 24B16GB(あと5.0GB足りない)2bit(Q2_K)10GB約43 tok/s補正済み
Magistral Small 250916GB(あと5.0GB足りない)2bit(Q2_K)10GB約43 tok/s補正済み
Devstral Small 250716GB(あと5.0GB足りない)2bit(Q2_K)10GB約43 tok/s補正済み
Mistral Small 3.2 24B16GB(あと5.0GB足りない)2bit(Q2_K)10GB約43 tok/s補正済み
Codestral 22B15GB(あと4.5GB足りない)2bit(Q2_K)10GB約45 tok/s補正済み
ERNIE 4.5 21B-A3B Thinking14GB(あと3.2GB足りない)2bit(Q2_K)8.8GB約180 tok/s補正済み
DeepSeek-R1 Distill Qwen 14B11GB(あと0.1GB足りない)4bit(IQ4_XS)9.8GB約46 tok/s補正済み
DeepSeek-R1 Distill Qwen 14B Japanese11GB(あと0.1GB足りない)4bit(IQ4_XS)9.8GB約46 tok/s補正済み
Qwen2.5-Coder 14B11GB(あと0.1GB足りない)4bit(IQ4_XS)9.8GB約46 tok/s補正済み
Qwen2.5 14B11GB(あと0.1GB足りない)4bit(IQ4_XS)9.8GB約46 tok/s補正済み

同じVRAM11GBの機種の中での位置

当サイトにはVRAM11GBの機種が2件あります。帯域幅は616GB/sで、この容量では最も速い部類です。2番目のGeForce GTX 1080 Ti(484GB/s)より約27%速い計算になります。この機種のVRAMに収まるのは108本で、すべて快適に動きます。

この機種は公開ベンチマークで速度を補正しているので、表の速度は他機種の係数を流用した推定より当てになります。

この機種は2018年の発売で、いま8年目です。

同じVRAM11GBの中では最も新しい機種です。同じ容量では2017年のGeForce GTX 1080 Tiまで遡れますが、動くモデルの数はどれも変わりません。

この機種を実際に使うなら

14Bの量子化はモデルごとに選び分けます。Qwen3 14BとABEJA Qwen3 14B AgenticはQ4_K_Mで入り、DeepSeek-R1 Distill Qwen 14B JapaneseはIQ4_XS(必要9.8GB・推定46tok/s)に落とす。

余白はそれぞれ0.1GBと0.7GBで、長めの入力を渡すならIQ4_XSの側が溢れにくい計算です。コードはQwen2.5-Coder 14BのIQ4_XSで推定46tok/s。補完用に7BのQ8_0(推定49.3tok/s)を並べておくと、重さで使い分けられます。

注意したいのはPyTorch系の手順。FlashAttention 2はAmpere以降が対象なので、この世代では無効にする設定が要ります。GGUFをllama.cpp系で動かす構成なら、この制約に当たる場面は少なめです。

買うときの見どころ

同じシリーズで一段上になるのは容量の順でRTX 2060 12GBですが、4bit以上の本数は+0本で、推定速度は下がります。2080 Tiから替える意味はありません。発売は2018年なので、手に入るのは中古だけ。長く回されてきた個体はファンや放熱まわりが傷んでいる場合があり、高い負荷を長時間かけるローカルLLMでは状態の差がそのまま出ます。

2枚挿しで容量を足す手も考えられますが、合計22GBでも24GBのRTX 3090 1枚には届かず、3090は4bit以上で158本。20B級より上を狙うなら、2枚目を探すより24GBの1枚へ移るほうが構成は単純です。

RTX 20シリーズの中での位置

中古で安く手に入る世代です。RTX 20シリーズ8機種の中では、容量が小さいほうから7番目です。一段上のGeForce RTX 2060 12GB(VRAM12GB)にすると、4bit以上で動くモデルがほぼ変わりません。

買う前に確認すること: 発売から年数が経っており、中古の個体差が大きい世代です。ファンの異音、VRAMの安定性、保証の有無を確認してください。 シリーズ全体の選び方はRTX 20シリーズでローカルAIはどこまで動くかにまとめています。

この機種で足りるAI用途

用途必要な容量この機種(11GB)
Stable Diffusion / SDXLVRAM 12GB動かない あと1GB
FLUX / 高品質画像生成VRAM 16GB動かない あと5GB
動画生成AI(Wan / Hunyuan / LTX)VRAM 24GB動かない あと13GB
ローカルLLM(8Bクラス)VRAM 8GB快適
ローカルLLM(27〜32Bクラス)VRAM 24GB動かない あと13GB
ローカルLLM(70B〜120B MoE)VRAM 40GB動かない あと29GB
文字起こし(Whisper)VRAM 6GB快適

VRAMが同じくらいの他の機種

機種メモリ帯域幅快適に動く数
GeForce RTX 3080 12GB12GB912 GB/s136
GeForce RTX 3080 Ti12GB912 GB/s136
GeForce RTX 3080 10GB10GB760 GB/s111
GeForce RTX 507012GB672 GB/s135
GeForce RTX 407012GB504 GB/s133
GeForce RTX 4070 SUPER12GB504 GB/s133
GeForce RTX 4070 Ti12GB504 GB/s133
GeForce GTX 1080 Ti11GB484 GB/s116

gpt-oss-20bが動くPC・Macに買い替えるなら

PR: 以下はAmazonアソシエイトの広告リンクを含みます。価格の目安は執筆時点のもので変動します。価格・在庫はリンク先でご確認ください。

ぴったり自作

自作: RTX 5070 Ti(16GB)・メモリ32GB

BTOより同予算で一段上のGPUに届く。画像生成とローカルLLMの定番

Ryzen 7 9700X・DDR5 16GB×2・RTX 5070 Ti・NVMe 2TB・電源850W ・ 目安 27〜35万円

要件を満たす中で最も手頃

余裕を持つなら自作

自作: RTX 5090(32GB)・メモリ96GB

動画生成・学習・32BクラスのLLM。メモリ96GBあれば、大型のMoE型を一部メインメモリに逃がして動かせる

Ryzen 9 9950X・DDR5 48GB×2・RTX 5090・NVMe 4TB・電源1000W・大型ケース ・ 目安 60〜80万円

将来の用途拡張(大きなモデル・並列エージェント)に余裕

別の形ならMac

Mac mini M4 Pro(メモリ48GB・SSD 1TB)

30BクラスのローカルLLMとエージェント並列運用を1台で。コスパの中心

M4 Pro・ユニファイドメモリ48GB・SSD 1TB・帯域273GB/s ・ 目安 30〜36万円

Macで同じ仕事をするなら

この機種の公開ベンチマーク(出典)

RTX 2080 Ti の llama.cpp 公開ベンチマーク(GitHub Discussion): llama-2-7b Q4_0 = 107.51 tok/s。この値からメモリ帯域幅に対する実効係数(67%)を求め、他モデルの速度推定に使っています。

よくある質問

GeForce RTX 2080 TiでローカルLLMは動く?

動きます。VRAM11GB(実効約11GB)に、収録204モデル中108本が収まります。日本語チャットならABEJA Qwen3 14B Agentic(4bit(Q4_K_M))が推定約43 tok/sです。

GeForce RTX 2080 Tiで動かないモデルは?

gpt-oss-20bは4bitで約12GB必要で、VRAMがあと約1.8GB足りません。