Apple Silicon(Mac)
Apple M3
データの取得日:
- メモリ帯域
- 100 GB/s
- 出典
- 確認日:
8 GB のとき
モデルごとに1件、このメモリに収まる量子化のうち、8K トークン以上のコンテキストで収まる中でファイルが最も大きい(精度が高い)ものを、よく使われている順に最大30件出しています。コンテキスト長は、その量子化が収まる最も長い値です(埋め込みモデルなど、扱える長さが 8K より短いモデルはその最大の長さ)。会話・文章の生成以外のモデルには用途を付けています。「残り」はメモリの量から推定を引いた値で、容量の 5% 未満は「ぎりぎり」としています(収まることの保証ではありません)。
-
Qwen3.8-27B UD-IQ1_Mコンテキスト長 8,192 推定 8.47 GB 残り 0.12 GB(ぎりぎり) 生成の速さ 8.9〜12
-
Ornith-1.5-9B Q5_K_Mコンテキスト長 16,384 推定 8.49 GB 残り 0.10 GB(ぎりぎり) 生成の速さ 8.8〜12
-
コンテキスト長 8,192 推定 8.49 GB 残り 0.10 GB(ぎりぎり) 生成の速さ 8.8〜12
-
Ornith-1.0-9B Q5_K_Mコンテキスト長 16,384 推定 8.13 GB 残り 0.46 GB 生成の速さ 9.3〜12
-
コンテキスト長 512 推定 2.41 GB 残り 6.18 GB 生成の速さ 45〜60
-
コンテキスト長 8,192 推定 8.35 GB 残り 0.24 GB(ぎりぎり) 生成の速さ 8.6〜11
-
MOSS-Music-8B-Instruct Q4_K_Mコンテキスト長 16,384 推定 8.45 GB 残り 0.14 GB(ぎりぎり) 生成の速さ 12〜15
-
コンテキスト長 8,192 推定 7.94 GB 残り 0.65 GB 生成の速さ 10〜14
-
コンテキスト長 8,192 推定 8.48 GB 残り 0.11 GB(ぎりぎり) 生成の速さ 8.4〜11
-
Ornith-1.5-9B-uncensored Q5_K_Mコンテキスト長 16,384 推定 8.10 GB 残り 0.49 GB 生成の速さ 9.3〜12
-
コンテキスト長 32,768 推定 8.12 GB 残り 0.47 GB 生成の速さ 10〜13
-
Wan2.1 Q4_K_Mコンテキスト長 16,384 推定 8.08 GB 残り 0.51 GB 生成の速さ 10〜14
-
コンテキスト長 16,384 推定 6.82 GB 残り 1.77 GB 生成の速さ 15〜20
-
コンテキスト長 131,072 推定 8.42 GB 残り 0.17 GB(ぎりぎり) 生成の速さ 12〜16
-
コンテキスト長 131,072 推定 8.07 GB 残り 0.52 GB 生成の速さ 22〜30
-
コンテキスト長 65,536 推定 8.34 GB 残り 0.25 GB(ぎりぎり) 生成の速さ 53〜71
-
Hy-MT2-7B Q6_Kコンテキスト長 8,192 推定 8.04 GB 残り 0.55 GB 生成の速さ 9.7〜13
-
コンテキスト長 262,144 推定 4.83 GB 残り 3.76 GB 生成の速さ 110〜146
-
コンテキスト長 16,384 推定 8.51 GB 残り 0.08 GB(ぎりぎり) 生成の速さ 8.7〜12
-
コンテキスト長 16,384 推定 8.10 GB 残り 0.49 GB 生成の速さ 9.3〜12
-
Sharp-Spark-X2.5-4B Q6_K_XLコンテキスト長 65,536 推定 6.95 GB 残り 1.64 GB 生成の速さ 17〜22
-
AdaVaR-3B F16コンテキスト長 32,768 推定 8.23 GB 残り 0.36 GB(ぎりぎり) 生成の速さ 9.7〜13
-
Qwen3-8B Q5_K_Lコンテキスト長 8,192 推定 8.29 GB 残り 0.30 GB(ぎりぎり) 生成の速さ 9.6〜13
-
Qwen3.5-9B-Kimi-k3-Distilled Q5_K_Mコンテキスト長 16,384 推定 8.28 GB 残り 0.31 GB(ぎりぎり) 生成の速さ 9.0〜12
-
Qwen3-4B-Instruct-2507 UD-Q8_K_XLコンテキスト長 16,384 推定 8.32 GB 残り 0.27 GB(ぎりぎり) 生成の速さ 12〜16
-
B1-9B Q5_K_Mコンテキスト長 16,384 推定 8.28 GB 残り 0.31 GB(ぎりぎり) 生成の速さ 9.0〜12
-
コンテキスト長 16,384 推定 8.32 GB 残り 0.27 GB(ぎりぎり) 生成の速さ 12〜16
-
Qwen2.5-7B-Instruct Q6_K_Lコンテキスト長 16,384 推定 8.31 GB 残り 0.28 GB(ぎりぎり) 生成の速さ 9.2〜12
-
Qwen3-4B UD-Q8_K_XLコンテキスト長 16,384 推定 8.32 GB 残り 0.27 GB(ぎりぎり) 生成の速さ 12〜16
-
コンテキスト長 8,192 推定 8.34 GB 残り 0.25 GB(ぎりぎり) 生成の速さ 9.6〜13
16 GB のとき
モデルごとに1件、このメモリに収まる量子化のうち、8K トークン以上のコンテキストで収まる中でファイルが最も大きい(精度が高い)ものを、よく使われている順に最大30件出しています。コンテキスト長は、その量子化が収まる最も長い値です(埋め込みモデルなど、扱える長さが 8K より短いモデルはその最大の長さ)。会話・文章の生成以外のモデルには用途を付けています。「残り」はメモリの量から推定を引いた値で、容量の 5% 未満は「ぎりぎり」としています(収まることの保証ではありません)。
-
Qwen3.8-27B UD-Q4_K_Sコンテキスト長 8,192 推定 17.1 GB 残り 0.08 GB(ぎりぎり) 生成の速さ 3.9〜5.2
-
Ornith-1.5-9B Q8_0コンテキスト長 131,072 推定 15.2 GB 残り 1.97 GB 生成の速さ 6.1〜8.2
-
コンテキスト長 131,072 推定 17.0 GB 残り 0.14 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 8,192 推定 17.2 GB 残り 0.02 GB(ぎりぎり) 生成の速さ 3.9〜5.2
-
コンテキスト長 65,536 推定 16.5 GB 残り 0.66 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 65,536 推定 16.3 GB 残り 0.89 GB 生成の速さ 4.4〜5.9
-
Qwen3.8-27B-Uncensored IQ4_XSコンテキスト長 8,192 推定 17.0 GB 残り 0.13 GB(ぎりぎり) 生成の速さ 3.9〜5.2
-
Ornith-1.0-9B Q8_0コンテキスト長 131,072 推定 14.9 GB 残り 2.23 GB 生成の速さ 6.3〜8.4
-
コンテキスト長 512 推定 2.41 GB 残り 14.8 GB 生成の速さ 45〜60
-
コンテキスト長 32,768 推定 17.1 GB 残り 0.05 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 131,072 推定 16.1 GB 残り 1.05 GB 生成の速さ 5.6〜7.4
-
コンテキスト長 40,960 推定 15.6 GB 残り 1.58 GB 生成の速さ 6.9〜9.2
-
コンテキスト長 32,768 推定 16.8 GB 残り 0.39 GB(ぎりぎり) 生成の速さ 4.5〜6.0
-
コンテキスト長 32,768 推定 16.8 GB 残り 0.36 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 32,768 推定 16.5 GB 残り 0.68 GB(ぎりぎり) 生成の速さ 5.5〜7.4
-
コンテキスト長 65,536 推定 16.2 GB 残り 0.96 GB 生成の速さ 4.6〜6.2
-
コンテキスト長 131,072 推定 14.9 GB 残り 2.26 GB 生成の速さ 6.3〜8.4
-
コンテキスト長 8,192 推定 17.0 GB 残り 0.14 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
Ternary-Bonsai-2-27B Q2_0コンテキスト長 65,536 推定 13.1 GB 残り 4.06 GB 生成の速さ 7.9〜10
-
コンテキスト長 32,768 推定 15.5 GB 残り 1.71 GB 生成の速さ 5.0〜6.6
-
コンテキスト長 131,072 推定 14.1 GB 残り 3.12 GB 生成の速さ 6.9〜9.2
-
コンテキスト長 8,192 推定 17.0 GB 残り 0.13 GB(ぎりぎり) 生成の速さ 3.9〜5.2
-
コンテキスト長 8,192 推定 17.1 GB 残り 0.08 GB(ぎりぎり) 生成の速さ 3.9〜5.2
-
Wan2.1 IQ3_Sコンテキスト長 32,768 推定 16.0 GB 残り 1.21 GB 生成の速さ 4.8〜6.4
-
コンテキスト長 32,768 推定 15.5 GB 残り 1.71 GB 生成の速さ 5.0〜6.6
-
コンテキスト長 65,536 推定 12.5 GB 残り 4.72 GB 生成の速さ 15〜20
-
コンテキスト長 65,536 推定 16.3 GB 残り 0.89 GB 生成の速さ MoE のため推定なし
-
コンテキスト長 16,384 推定 16.9 GB 残り 0.29 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 131,072 推定 8.42 GB 残り 8.76 GB 生成の速さ 12〜16
-
コンテキスト長 262,144 推定 12.4 GB 残り 4.82 GB 生成の速さ 22〜30
24 GB のとき
モデルごとに1件、このメモリに収まる量子化のうち、8K トークン以上のコンテキストで収まる中でファイルが最も大きい(精度が高い)ものを、よく使われている順に最大30件出しています。コンテキスト長は、その量子化が収まる最も長い値です(埋め込みモデルなど、扱える長さが 8K より短いモデルはその最大の長さ)。会話・文章の生成以外のモデルには用途を付けています。「残り」はメモリの量から推定を引いた値で、容量の 5% 未満は「ぎりぎり」としています(収まることの保証ではありません)。
-
コンテキスト長 8,192 推定 25.6 GB 残り 0.17 GB(ぎりぎり) 生成の速さ 2.5〜3.4
-
Ornith-1.5-9B BF16コンテキスト長 131,072 推定 23.8 GB 残り 1.94 GB 生成の速さ 3.3〜4.3
-
コンテキスト長 131,072 推定 25.5 GB 残り 0.26 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 65,536 推定 24.9 GB 残り 0.87 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 8,192 推定 25.7 GB 残り 0.09 GB(ぎりぎり) 生成の速さ 2.5〜3.3
-
コンテキスト長 262,144 推定 23.6 GB 残り 2.22 GB 生成の速さ MoE のため推定なし
-
コンテキスト長 65,536 推定 22.6 GB 残り 3.15 GB 生成の速さ 3.5〜4.7
-
コンテキスト長 65,536 推定 25.2 GB 残り 0.57 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 16,384 推定 25.7 GB 残り 0.09 GB(ぎりぎり) 生成の速さ 2.5〜3.4
-
コンテキスト長 16,384 推定 24.7 GB 残り 1.06 GB(ぎりぎり) 生成の速さ 2.7〜3.6
-
Ornith-1.0-9B BF16コンテキスト長 131,072 推定 23.3 GB 残り 2.43 GB 生成の速さ 3.3〜4.5
-
コンテキスト長 512 推定 2.41 GB 残り 23.4 GB 生成の速さ 45〜60
-
コンテキスト長 65,536 推定 25.3 GB 残り 0.46 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 131,072 推定 23.8 GB 残り 1.97 GB 生成の速さ 3.3〜4.3
-
コンテキスト長 40,960 推定 23.3 GB 残り 2.49 GB 生成の速さ 3.7〜4.9
-
コンテキスト長 65,536 推定 25.7 GB 残り 0.05 GB(ぎりぎり) 生成の速さ 3.0〜4.0
-
コンテキスト長 32,768 推定 25.4 GB 残り 0.42 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 32,768 推定 22.1 GB 残り 3.70 GB 生成の速さ 3.7〜4.9
-
コンテキスト長 131,072 推定 23.8 GB 残り 1.97 GB 生成の速さ 3.3〜4.3
-
コンテキスト長 131,072 推定 23.3 GB 残り 2.46 GB 生成の速さ 3.3〜4.5
-
コンテキスト長 65,536 推定 25.3 GB 残り 0.45 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
Ternary-Bonsai-2-27B Q2_0コンテキスト長 131,072 推定 17.4 GB 残り 8.35 GB 生成の速さ 7.9〜10
-
コンテキスト長 131,072 推定 21.9 GB 残り 3.86 GB 生成の速さ 5.0〜6.6
-
コンテキスト長 262,144 推定 18.4 GB 残り 7.42 GB 生成の速さ 6.9〜9.2
-
Ornith-1.0-35B Q4_K_Mコンテキスト長 131,072 推定 25.0 GB 残り 0.78 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 8,192 推定 25.3 GB 残り 0.45 GB(ぎりぎり) 生成の速さ 2.5〜3.4
-
コンテキスト長 32,768 推定 25.3 GB 残り 0.44 GB(ぎりぎり) 生成の速さ 2.7〜3.6
-
Wan2.1 Q4_K_Mコンテキスト長 65,536 推定 22.3 GB 残り 3.43 GB 生成の速さ 3.6〜4.8
-
コンテキスト長 131,072 推定 21.9 GB 残り 3.86 GB 生成の速さ 5.0〜6.6
-
コンテキスト長 65,536 推定 12.5 GB 残り 13.3 GB 生成の速さ 15〜20
よくある質問
- Apple M3 でどんなローカルLLMが動きますか?
- 当サイトでは 944 モデルに、24GB・8,192 トークンで収まる量子化があります(推定)。よく使われているのは Qwen3.8-27B・Ornith-1.5-9B・Huihui-Qwen3.6-35B-A3B-abliterated-MTP・Ornith-1.5-35B-A3B・Huihui-Qwen3.8-27B-abliterated などです。
- Apple M3 で動く、いちばん大きいモデルは?
- 当サイトに載っている中では Ling-3.0-flash(約 127.5B)で、Q1_0 なら 24GB に収まります(8,192 トークンの推定)。
- Apple M3 で文章を生成する速さは?
- メモリ帯域が 100 GB/s なので、たとえば Qwen3.8-27B の Q6_K(23.9 GB)なら、推定で毎秒 2.5〜3.4 トークンほどです(帯域 ÷ ファイルサイズの 6〜8 割。プロンプトの読み込みは含みません)。