VRAM・統合メモリから探す
VRAM 16 GB で動くローカルLLM
当サイトに載っている 1,276 モデルのうち、8,192 トークンのコンテキストで、必要メモリ(推定)が 16 GB に収まる量子化があるのは 834 モデルです。モデルごとに、収まるうち最も大きい(精度の高い)量子化を出しています。
データの取得日:
- 収まるモデルの数
- 834
- 収まるいちばん大きいモデル
- Qwen3.8-Flash-Next-FP4-Local-Strata 51.2B
- 16 GB の機種(当サイトに掲載)
- 30
VRAM 16 GB で動く、よく使われているモデル
Hugging Face のダウンロード数(直近30日・配布元の合計)の多い順です。性能の順位ではありません。
- 1 Qwen3.8-27B 27.3B UD-Q4_K_S 17.1 GB
- 2 Ornith-1.5-9B 9.2B Q8_0 11.2 GB
- 3 Huihui-Qwen3.6-35B-A3B-abliterated-MTP 35.5B Q2_K 14.5 GB
- 4 Ornith-1.5-35B-A3B 35.5B IQ3_XXS 16.8 GB
- 5 Huihui-Qwen3.8-27B-abliterated 27.3B IQ4_XS 17.2 GB
- 6 Tiel-Coder-35B-A3B-GGUF-MTP UD-IQ3_S 15.3 GB
- 7 gemma-4-12B-it 11.9B UD-Q8_K_XL 15.3 GB
- 8 Qwen3.5-9B 9B UD-Q8_K_XL 14.3 GB
- 9 Qwen3.8-27B-Uncensored 27.3B IQ4_XS 17.0 GB
- 10 MOSS-Music-8B-Instruct Q8_0 10.8 GB
推定 必要メモリは 8,192 トークン・KV キャッシュ f16 の推定です。
VRAM 16 GB で動くモデルの外部の評価
他の機関が、量子化する前の元のモデルを評価した値の上位です(当サイトの評価ではありません)。
人の評価(LMArena)
すべて見る →- 1.Qwen3.8-27B 1,433
- 2.Qwen3.5-27B 1,409
- 3.Qwen3.5-35B-A3B 1,394
- 4.Qwen3-30B-A3B-Instruct-2507 1,382
- 5.gemma-3-27b-it 1,365
出典:LMArena(CC BY 4.0)。
総合能力(Epoch AI)
すべて見る →- 1.Qwen3.8-27B 152.7
- 2.Qwen3.6-27B 146.7
- 3.gemma-4-31B-it 144.2
- 4.Qwen3.6-35B-A3B 144.1
- 5.Qwen3.5-35B-A3B 144.0
出典:Epoch Capabilities Index (Epoch AI)(CC BY 4.0)。
VRAM・統合メモリが 16 GB の機種
機種を選ぶと、その機種のページで動くモデルと生成の速さの目安が見られます。
- Apple M1 Pro200 GB/s
- Apple M2 Pro200 GB/s
- Apple M5153 GB/s
- Apple M4120 GB/s
- Apple M2100 GB/s
- Apple M3100 GB/s
- Apple M1
- Apple M6
- GeForce RTX 5080960 GB/s
- GeForce RTX 5070 Ti896 GB/s
- GeForce RTX 4080 SUPER736 GB/s
- GeForce RTX 4080717 GB/s
- GeForce RTX 4070 Ti SUPER672 GB/s
- Radeon RX 9070640 GB/s
- Radeon RX 9070 XT640 GB/s
- Radeon RX 7800 XT624 GB/s
- Radeon RX 6950 XT576 GB/s
- Radeon RX 7900 GRE576 GB/s
- Radeon RX 7900M576 GB/s
- Arc A770 (16GB)560 GB/s
- Arc A770M512 GB/s
- Radeon RX 6800512 GB/s
- Radeon RX 6800 XT512 GB/s
- Radeon RX 6900 XT512 GB/s
- GeForce RTX 5060 Ti448 GB/s
- Radeon RX 9060 XT (16GB)320 GB/s
- Radeon RX 7600 XT288 GB/s
- GeForce RTX 4060 Ti
- GeForce RTX 4090 Laptop GPU
- GeForce RTX 5080 Laptop GPU
VRAM 16 GB に収まるモデルの一覧
モデルごとに1件、このメモリに収まる量子化のうち、8K トークン以上のコンテキストで収まる中でファイルが最も大きい(精度が高い)ものを、よく使われている順に最大30件出しています。コンテキスト長は、その量子化が収まる最も長い値です(埋め込みモデルなど、扱える長さが 8K より短いモデルはその最大の長さ)。会話・文章の生成以外のモデルには用途を付けています。「残り」はメモリの量から推定を引いた値で、容量の 5% 未満は「ぎりぎり」としています(収まることの保証ではありません)。
-
Qwen3.8-27B UD-Q4_K_Sコンテキスト長 8,192 推定 17.1 GB 残り 0.08 GB(ぎりぎり)
-
Ornith-1.5-9B Q8_0コンテキスト長 131,072 推定 15.2 GB 残り 1.97 GB
-
コンテキスト長 131,072 推定 17.0 GB 残り 0.14 GB(ぎりぎり)
-
コンテキスト長 8,192 推定 17.2 GB 残り 0.02 GB(ぎりぎり)
-
コンテキスト長 65,536 推定 16.5 GB 残り 0.66 GB(ぎりぎり)
-
コンテキスト長 65,536 推定 16.3 GB 残り 0.89 GB
-
Qwen3.8-27B-Uncensored IQ4_XSコンテキスト長 8,192 推定 17.0 GB 残り 0.13 GB(ぎりぎり)
-
Ornith-1.0-9B Q8_0コンテキスト長 131,072 推定 14.9 GB 残り 2.23 GB
-
コンテキスト長 512 推定 2.41 GB 残り 14.8 GB
-
コンテキスト長 32,768 推定 17.1 GB 残り 0.05 GB(ぎりぎり)
-
コンテキスト長 131,072 推定 16.1 GB 残り 1.05 GB
-
コンテキスト長 40,960 推定 15.6 GB 残り 1.58 GB
-
コンテキスト長 32,768 推定 16.8 GB 残り 0.39 GB(ぎりぎり)
-
コンテキスト長 32,768 推定 16.8 GB 残り 0.36 GB(ぎりぎり)
-
コンテキスト長 32,768 推定 16.5 GB 残り 0.68 GB(ぎりぎり)
-
コンテキスト長 65,536 推定 16.2 GB 残り 0.96 GB
-
コンテキスト長 131,072 推定 14.9 GB 残り 2.26 GB
-
コンテキスト長 8,192 推定 17.0 GB 残り 0.14 GB(ぎりぎり)
-
Ternary-Bonsai-2-27B Q2_0コンテキスト長 65,536 推定 13.1 GB 残り 4.06 GB
-
コンテキスト長 32,768 推定 15.5 GB 残り 1.71 GB
-
コンテキスト長 131,072 推定 14.1 GB 残り 3.12 GB
-
コンテキスト長 8,192 推定 17.0 GB 残り 0.13 GB(ぎりぎり)
-
コンテキスト長 8,192 推定 17.1 GB 残り 0.08 GB(ぎりぎり)
-
Wan2.1 IQ3_Sコンテキスト長 32,768 推定 16.0 GB 残り 1.21 GB
-
コンテキスト長 32,768 推定 15.5 GB 残り 1.71 GB
-
コンテキスト長 65,536 推定 12.5 GB 残り 4.72 GB
-
コンテキスト長 65,536 推定 16.3 GB 残り 0.89 GB
-
コンテキスト長 16,384 推定 16.9 GB 残り 0.29 GB(ぎりぎり)
-
コンテキスト長 131,072 推定 8.42 GB 残り 8.76 GB
-
コンテキスト長 262,144 推定 12.4 GB 残り 4.82 GB
よくある質問
- VRAM 16 GB でどんなローカルLLMが動きますか?
- 当サイトでは 834 モデルに、8,192 トークンで 16 GB に収まる量子化があります(推定)。よく使われているのは Qwen3.8-27B・Ornith-1.5-9B・Huihui-Qwen3.6-35B-A3B-abliterated-MTP・Ornith-1.5-35B-A3B・Huihui-Qwen3.8-27B-abliterated などです。
- VRAM 16 GB で動く、いちばん大きいモデルは?
- 当サイトに載っている中では Qwen3.8-Flash-Next-FP4-Local-Strata(約 51.2B)です。BF16 なら 8,192 トークンで推定 2.66 GB です。小さい量子化ほど品質は下がります。
- Mac の統合メモリ 16 GB でも同じですか?
- macOS は GPU が使えるメモリに上限を設けているので、搭載メモリ 16 GB のすべてをモデルに使えるわけではありません。Mac では、必要メモリに余裕を見て選んでください。
- コンテキストを長くするとどうなりますか?
- KV キャッシュが増えるので、必要メモリも増えます。各モデルのページで、コンテキスト長ごとの必要メモリ(推定)を確かめられます。