AI PCナビ使うAIと、させたい仕事に合うPC・Macを。
トップ › モデル別 › Kimi Linear 48B-A3B

Kimi Linear 48B-A3B を動かすPCスペック(必要VRAM・メモリ・速度の目安)

線形注意を使う48BのMoE(アクティブ3B)。長文でもKVキャッシュが増えにくい。MIT。VRAM 32GB / Mac 48GBから

29GB4bitで動かすのに要るメモリ(会話8,192トークン分込み)
VRAM 32GB実用になるいちばん安いGPU: GeForce RTX 5090
48GB実用になるいちばん小さいMac: M5 Max(48GB)
1,048,576最大コンテキスト(学習時)

編集部の見立て

Moonshot AIが線形注意の設計を示すために公開した総48B、アクティブ3BのMoEです。線形のKDA層と全域のMLA層を3対1で混ぜ、長文でKVが増えにくい。学習時の文脈は1,048,576トークンで、KVは1トークン15KB。8kの文脈込みで29.4GBが要り、推定速度はRTX 5090で350.4tok/s、Apple M5 Max(48GB)で158.1tok/s。

GPUなしでもRyzen AI Max+ 395(64GB)で48.5tok/sです。MITで、本を丸ごと読ませる用途を32GB級のGPUで試したい人向け。

量子化別の必要メモリ

ファイルサイズは Hugging Face(bartowski/moonshotai_Kimi-Linear-48B-A3B-Instruct-GGUF) に置かれている実際のファイルサイズです。KVキャッシュ(会話の作業メモリ)は8,192トークン・fp16として、モデルの構造(27層・KVを圧縮するMLA方式・文脈全体を見る層は7層だけ)から計算しています。必要メモリの合計には計算用のバッファも含めています。

量子化ファイルKVキャッシュ(8k)必要合計GPUならMacなら
2bit(IQ2_M)
品質劣化大。最後の手段
15GB0.1GB16GBVRAM 20GB〜24GB〜
2bit(Q2_K)
品質劣化大。最後の手段
16GB0.1GB17GBVRAM 20GB〜32GB〜
3bit(IQ3_M)
メモリ優先
21GB0.1GB22GBVRAM 24GB〜36GB〜
3bit(Q3_K_M)
メモリ優先
21GB0.1GB22GBVRAM 24GB〜36GB〜
4bit(IQ4_XS)
Q4_K_Mより一回り小さい
25GB0.1GB26GBVRAM 32GB〜48GB〜
4bit(Q4_K_M)
標準。迷ったらこれ
28GB0.1GB29GBVRAM 32GB〜48GB〜
5bit(Q5_K_M)
品質重視
33GB0.1GB34GBVRAM 48GB〜48GB〜
6bit(Q6_K)
ほぼ無劣化
38GB0.1GB39GBVRAM 48GB〜64GB〜
8bit(Q8_0)
無劣化に近い
49GB0.1GB51GBGPU単体では不可96GB〜
16bit(BF16)
元精度
92GB0.1GB95GBGPU単体では不可128GB〜

モデルの構造と、必要メモリの増え方

Kimi Linear 48B-A3BはMoonshot AIが2026年2月に公開した49.12Bのモデルです。GGUFのヘッダには27層と書かれており、総パラメータ49.12Bのうち、1トークンの生成で実際に読むのは約3Bです(MoE)。メモリには全部を載せる必要がある一方、毎回読み出す量はアクティブパラメータのぶんで済むため、同じサイズのdense型より速く動きます。

KVを低ランク(rank 512)に圧縮するMLA方式です。同じ規模の一般的なモデルよりKVキャッシュが小さく済みます。1トークンあたりのKVキャッシュは約15KB(fp16)で、コンテキスト長にそのまま比例します。実際の値は、8,192トークンで0.1GB、128Kトークンまで伸ばすと1.9GBです。

ライセンス表記: mit(層数と窓の大きさはGGUFヘッダから取得)

このモデルを実際に使うなら

同じMoonshotでもKimi K2.6とは役割が別です。K2.6は総1兆・アクティブ32Bの主力で、3bit台でも8kの文脈込みで449.4GBと、1台には収まりません。こちらは5.7Tトークンで学習した研究寄りの版で、画像は読めず、コード特化の調整も謳っていません。

新しい注意の型なので、llama.cppは対応済みの版が要ります。RTX 5090の実効31.5GBでは29.4GBを引いて残り2.1GB、KVに換算して約14万トークンです。100万トークンを使い切るには15GBの余白が要り、M5 Max(48GB・実効36GB)でも本体28GBと足すと43GBで溢れます。

100万トークンを使い切るなら64GB以上のMacから。Ryzen AI Max+ 395(64GB)の実効42.9GBでは届きません。

このモデルの系統

GGUFヘッダに書かれたアーキテクチャはkimi-linearで、当サイト収録の204モデル中1本が同じ系統です。ツール側の対応状況は、使う前に確認しておくと確実です。

配布元はbartowski/moonshotai_Kimi-Linear-48B-A3B-Instruct-GGUF、元になったモデルはmoonshotai/Kimi-Linear-48B-A3B-Instructです。

同じMoonshot AIのモデルでは、サイズの近いものにKimi K2.6(1026.41B)があります。

コンテキスト長を伸ばすと必要メモリはどう増えるか

長い文書を渡す、会話を続ける、コードベース全体を読ませる。こうした使い方ではコンテキスト長を伸ばしますが、その分KVキャッシュがメモリを食います。4bit(Q4_K_M)(28GB)を前提に、コンテキスト長ごとの必要メモリを計算しました。MLA(圧縮KV)採用のため、長いコンテキストでもKVが小さく収まります。

コンテキストKVキャッシュ必要合計必要なGPU必要なMac
4,0960.1GB29GBVRAM 32GB〜48GB〜
8,192既定0.1GB29GBVRAM 32GB〜48GB〜
16,3840.2GB30GBVRAM 32GB〜48GB〜
32,7680.5GB30GBVRAM 32GB〜48GB〜
65,5360.9GB30GBVRAM 32GB〜48GB〜
131,0721.9GB31GBVRAM 32GB〜48GB〜

KVキャッシュをq8_0に量子化すると、32,768トークンでのKVは約0.5GBから約0.2GBに減ります(品質はわずかに落ちます)。

同じサイズ帯の他のモデル

モデル開発元4bitで必要一言
Tanuki-8x8B松尾・岩澤研究室 GENIAC29GBTanuki-8BをMoE化した47B(アクティブ13B)。Apache 2.0。VRAM 32GB / Mac 48GBから
RakutenAI-2.0 8x7B楽天29GB楽天の日本語MoE(総47B・アクティブ13B)。Mac 48GB以上かVRAM 32GB向け
Mixtral 8x7BMistral AI29GB公開MoEの先駆け(総47B・アクティブ13B)。Apache 2.0。VRAM 32GB / Mac 48GBから
Seed-OSS 36BByteDance23GB長文コンテキストに強い36Bのdense型。VRAM 24〜32GB向け
BigBang v1 35Bendless-frontier22GB35BのMoEで画像対応。Apache 2.0。アクティブパラメータが小さくメモリ32GB級でも速い
Ornith 1.5 35B-A3Bornith-ai22GB35BのMoE(アクティブ3B)でMIT。メモリ32GBクラスで速く動く

4bit(Q4_K_M)が動く機種と推定速度

4bit(Q4_K_M)なら33機種で20 tok/s以上、2機種で8〜20 tok/s(テキスト生成の推定・計算方法)。

快適 20 tok/s以上(33機種)

メモリに一部を逃がせば動く(43機種・CPUオフロード、PCのメモリ32GB想定)

動かない機種(63)を見る

今のPCのまま、Kimi Linear 48B-A3Bを動かすために足すもの

PR: 以下はAmazonアソシエイトの広告リンクを含みます。価格の目安は執筆時点のもので変動します。価格・在庫はリンク先でご確認ください。

NVMe SSD / 外付けSSD 2TB

Kimi Linear 48B-A3Bは4bit(IQ4_XS)で25GB、8bitのQ8_0なら49GB。精度違いを3種類そろえるだけで約67GB使います。何本か試すうちに、まず内蔵SSDが先に埋まります。Macは内蔵を増設できないので外付けが前提です。

メモリ増設(32GB化)

Kimi Linear 48B-A3BはMoEで、1トークンごとに動くのは3B分だけです。だからGPUに全部載せなくても、システムメモリ側に置いて実用速度が出ます。必要なのは29GBぶんの空きで、この型はVRAMを足すより先にメモリを増やすほうが効きます。

ローカルLLM / AIエージェント入門書

Kimi Linear 48B-A3BのようなGGUF版のモデルを落として動かす手順、量子化の選び方、Ollama と LM Studio の使い分けは、一冊まとまったものを手元に置くと早い。

Kimi Linear 48B-A3Bを動かせるPC・Macを今日買うなら

PR: 以下はAmazonアソシエイトの広告リンクを含みます。価格の目安は執筆時点のもので変動します。価格・在庫はリンク先でご確認ください。

ぴったりMac

Mac mini M4 Pro(メモリ48GB・SSD 1TB)

30BクラスのローカルLLMとエージェント並列運用を1台で。コスパの中心

M4 Pro・ユニファイドメモリ48GB・SSD 1TB・帯域273GB/s ・ 目安 30〜36万円

要件を満たす中で最も手頃

余裕を持つならMac

Mac mini M4 Pro(メモリ64GB・SSD 1TB)

70BクラスのローカルLLMまで。同じ価格帯のGeForce機より大きいモデルまで動く

M4 Pro・ユニファイドメモリ64GB・SSD 1TB ・ 目安 36〜42万円

将来の用途拡張(大きなモデル・並列エージェント)に余裕

別の形なら常時稼働サーバー型

Ryzen AI Max+ 395 ミニPC(メモリ128GB)

Windows/Linuxで128GBの共有メモリ。GPU側に96GBを割り当てれば、gpt-oss-120bや70Bクラスを常時サーバとして動かせる

Ryzen AI Max+ 395・LPDDR5X 128GB(256GB/s)・NVMe 2TB ・ 目安 32〜48万円

Windowsで同じ仕事をするなら

よくある質問

Kimi Linear 48B-A3Bを動かすのに必要なVRAMは?

4bit量子化(4bit(Q4_K_M))でファイル28GB、8,192トークンのKVキャッシュを含めて約29GBが必要です。GPU単体ならGeForce RTX 5090(VRAM 32GB)から実用速度で動きます。

Kimi Linear 48B-A3BはMacで動く?

動きます。ユニファイドメモリ48GB以上のApple Silicon(例: Apple M5 Max(48GB))なら、4bit量子化で実用的な速さが出ます。

このクラスの選び方: ローカルLLM(27〜32Bクラス)に必要なPC / MacかWindowsか

手持ちのPCで判定する