本ページはプロモーション(楽天市場・Amazon・BTOパソコンショップのアフィリエイトリンク)を含みます

Mistral Small 4 119Bをローカルで動かすには

Mistral Small 4 119BはMistral系の、MoE(全体119.4Bのうち、1語ごとに計算するのは約6.5B)のモデルです。大型MoE。用途の目安は汎用(会話・文章作成)、扱える文脈の長さは最大1024K(公開 2026年1月23日)。

74.7GB4bit(Q4_K_M)・文脈8Kで必要なメモリ

量子化・文脈の長さを変えて計算する →

必要なメモリ(量子化×文脈の長さ)

量子化文脈8K文脈32K文脈128K
Q4_K_M(4bit・定番)74.7GB75.5GB78.8GB
Q5_K_M(5bit)87.6GB88.5GB91.7GB
Q6_K(6bit)101GB102GB105GB
Q8_0(8bit・ほぼ劣化なし)130GB131GB134GB
BF16(無圧縮)244GB245GB249GB

迷ったら Q4_K_M(4bit)が定番です。文脈(一度に読ませる長さ)を伸ばすほど、会話の記憶分のメモリが増えます。MoEモデルは、メモリには全体が必要ですが、速度は計算する分(約6.5B)で決まるため、サイズの割に速く動きます。

VRAMに丸ごと載るグラボ(0機種・4bit以上・文脈8K・安い順)

今回比較したグラボ1枚には丸ごと載りません。メインメモリに一部を逃がすか、メモリの大きいMacを検討してください。

PCごと買うなら(BTOパソコン)

グラボだけでなくPC一式で買うなら、BTOパソコンのショップでグラボを選んで構成できます。このモデルは4bitで丸ごと載るグラボがないため、メインメモリを多め(64GB以上)に積んで一部を逃がす構成か、下のMac・共有メモリのPCを検討してください。

【FRONTIER】

パーツの型番まで選べるショップなら パソコンショップSEVENでBTOパソコンを見る

静かさや冷却にこだわるなら BTOパソコンのサイコム

Mac・共有メモリのPC(Ryzen AI Max など)で動く構成

GPU・PCおすすめの量子化必要メモリ判定速度の目安価格.com最安
Ryzen AI Max+ 395(128GB)
共有メモリ 128GB
Q5_K_M87.6GB○ ギリギリ実用的(21 tok/秒)—
Mac M4 Max(128GB)
共有メモリ 128GB
Q5_K_M87.6GB○ ギリギリ快適(45 tok/秒)—
Mac M3 Ultra(256GB)
共有メモリ 256GB
Q8_0130GB◎ 余裕快適(46 tok/秒)—

入手先

導入の手順は ローカルLLMの始め方(Ollama・LM Studioの違い) にまとめています。

同じ系列のモデル

ほかのモデル

あわせて読みたい

計算は llama.cpp(Ollama・LM Studio)でGGUF形式を使う場合の目安で、±10〜20%程度ずれることがあります。モデルの諸元は配布元の設定ファイル(config.json)から算出(データ更新 2026年9月27日)、価格は価格.comの最安値(2026-10-14)。