VRAM・統合メモリから探す
VRAM 64 GB で動くローカルLLM
当サイトに載っている 1,276 モデルのうち、8,192 トークンのコンテキストで、必要メモリ(推定)が 64 GB に収まる量子化があるのは 998 モデルです。モデルごとに、収まるうち最も大きい(精度の高い)量子化を出しています。
データの取得日:
- 収まるモデルの数
- 998
- 収まるいちばん大きいモデル
- Grok-1 316.5B
- 64 GB の機種(当サイトに掲載)
- 8
VRAM 64 GB で動く、よく使われているモデル
Hugging Face のダウンロード数(直近30日・配布元の合計)の多い順です。性能の順位ではありません。
- 1 Qwen3.8-27B 27.3B BF16 56.4 GB
- 2 Qwen3.8-Flash-Next-GSQ-RCO 176.9B Q2_0 67.8 GB
- 3 Ornith-1.5-9B 9.2B BF16 19.8 GB
- 4 Huihui-Qwen3.6-35B-A3B-abliterated-MTP 35.5B Q8_0 39.1 GB
- 5 Ornith-1.5-35B-A3B 35.5B Q8_0 39.1 GB
- 6 Qwen3.8-Flash-Next-GSQ-RCO-abliterated 176.9B Q2_0 68.2 GB
- 7 Huihui-Qwen3.8-27B-abliterated 27.3B BF16 56.4 GB
- 8 OTel-2.0-Decision-26B-A4B-4bit 25.2B Q8_0 28.4 GB
- 9 Qwen3.8-27B-iMatrix-NVFP4-MTP NVFP4 18.9 GB
- 10 Tiel-Coder-35B-A3B-GGUF-MTP UD-Q8_K_XL 40.1 GB
推定 必要メモリは 8,192 トークン・KV キャッシュ f16 の推定です。
VRAM 64 GB で動くモデルの外部の評価
他の機関が、量子化する前の元のモデルを評価した値の上位です(当サイトの評価ではありません)。
人の評価(LMArena)
- 1.Qwen3.8-27B 1,433
- 2.Qwen3.5-122B-A10B 1,416
- 3.Qwen3.5-27B 1,409
- 4.Qwen3-Next-80B-A3B-Instruct 1,399
- 5.Qwen3.5-35B-A3B 1,394
出典:LMArena(CC BY 4.0)。
総合能力(Epoch AI)
- 1.Qwen3.8-27B 152.7
- 2.Qwen3.6-27B 146.7
- 3.gemma-4-31B-it 144.2
- 4.Qwen3.6-35B-A3B 144.1
- 5.Qwen3.5-35B-A3B 144.0
出典:Epoch Capabilities Index (Epoch AI)(CC BY 4.0)。
VRAM・統合メモリが 64 GB の機種
機種を選ぶと、その機種のページで動くモデルと生成の速さの目安が見られます。
VRAM 64 GB に収まるモデルの一覧
モデルごとに1件、このメモリに収まる量子化のうち、8K トークン以上のコンテキストで収まる中でファイルが最も大きい(精度が高い)ものを、よく使われている順に最大30件出しています。コンテキスト長は、その量子化が収まる最も長い値です(埋め込みモデルなど、扱える長さが 8K より短いモデルはその最大の長さ)。会話・文章の生成以外のモデルには用途を付けています。「残り」はメモリの量から推定を引いた値で、容量の 5% 未満は「ぎりぎり」としています(収まることの保証ではありません)。
-
コンテキスト長 32,768 推定 68.5 GB 残り 0.23 GB(ぎりぎり)
-
Qwen3.8-27B BF16コンテキスト長 131,072 推定 64.4 GB 残り 4.27 GB
-
Ornith-1.5-9B BF16コンテキスト長 262,144 推定 28.1 GB 残り 40.6 GB
-
コンテキスト長 262,144 推定 44.3 GB 残り 24.4 GB
-
コンテキスト長 16,384 推定 68.4 GB 残り 0.28 GB(ぎりぎり)
-
コンテキスト長 262,144 推定 44.3 GB 残り 24.4 GB
-
コンテキスト長 131,072 推定 64.4 GB 残り 4.27 GB
-
コンテキスト長 262,144 推定 33.6 GB 残り 35.1 GB
-
コンテキスト長 262,144 推定 35.5 GB 残り 33.2 GB
-
コンテキスト長 262,144 推定 45.3 GB 残り 23.4 GB
-
コンテキスト長 262,144 推定 29.7 GB 残り 39.0 GB
-
コンテキスト長 262,144 推定 47.4 GB 残り 21.3 GB
-
Ornith-1.0-9B BF16コンテキスト長 262,144 推定 27.6 GB 残り 41.1 GB
-
コンテキスト長 512 推定 2.41 GB 残り 66.3 GB
-
コンテキスト長 262,144 推定 45.6 GB 残り 23.1 GB
-
コンテキスト長 262,144 推定 28.1 GB 残り 40.6 GB
-
コンテキスト長 40,960 推定 23.3 GB 残り 45.4 GB
-
コンテキスト長 262,144 推定 49.8 GB 残り 18.9 GB
-
コンテキスト長 262,144 推定 57.3 GB 残り 11.5 GB
-
コンテキスト長 262,144 推定 55.9 GB 残り 12.8 GB
-
コンテキスト長 32,768 推定 68.4 GB 残り 0.27 GB(ぎりぎり)
-
コンテキスト長 262,144 推定 28.1 GB 残り 40.6 GB
-
コンテキスト長 262,144 推定 27.6 GB 残り 41.1 GB
-
コンテキスト長 262,144 推定 44.9 GB 残り 23.8 GB
-
コンテキスト長 131,072 推定 63.6 GB 残り 5.12 GB
-
コンテキスト長 262,144 推定 30.5 GB 残り 38.2 GB
-
コンテキスト長 262,144 推定 18.4 GB 残り 50.4 GB
-
Ornith-1.0-35B Q8_0コンテキスト長 262,144 推定 43.4 GB 残り 25.3 GB
-
コンテキスト長 262,144 推定 48.6 GB 残り 20.1 GB
-
コンテキスト長 262,144 推定 49.8 GB 残り 18.9 GB
よくある質問
- VRAM 64 GB でどんなローカルLLMが動きますか?
- 当サイトでは 998 モデルに、8,192 トークンで 64 GB に収まる量子化があります(推定)。よく使われているのは Qwen3.8-27B・Qwen3.8-Flash-Next-GSQ-RCO・Ornith-1.5-9B・Huihui-Qwen3.6-35B-A3B-abliterated-MTP・Ornith-1.5-35B-A3B などです。
- VRAM 64 GB で動く、いちばん大きいモデルは?
- 当サイトに載っている中では Grok-1(約 316.5B)です。IQ1_S なら 8,192 トークンで推定 68.5 GB です。小さい量子化ほど品質は下がります。
- Mac の統合メモリ 64 GB でも同じですか?
- macOS は GPU が使えるメモリに上限を設けているので、搭載メモリ 64 GB のすべてをモデルに使えるわけではありません。Mac では、必要メモリに余裕を見て選んでください。
- コンテキストを長くするとどうなりますか?
- KV キャッシュが増えるので、必要メモリも増えます。各モデルのページで、コンテキスト長ごとの必要メモリ(推定)を確かめられます。