Apple Silicon(Mac)
Apple M1 Pro
データの取得日:
- メモリ帯域
- 200 GB/s
- 出典
- 確認日:
16 GB のとき
モデルごとに1件、このメモリに収まる量子化のうち、8K トークン以上のコンテキストで収まる中でファイルが最も大きい(精度が高い)ものを、よく使われている順に最大30件出しています。コンテキスト長は、その量子化が収まる最も長い値です(埋め込みモデルなど、扱える長さが 8K より短いモデルはその最大の長さ)。会話・文章の生成以外のモデルには用途を付けています。「残り」はメモリの量から推定を引いた値で、容量の 5% 未満は「ぎりぎり」としています(収まることの保証ではありません)。
-
Qwen3.8-27B UD-Q4_K_Sコンテキスト長 8,192 推定 17.1 GB 残り 0.08 GB(ぎりぎり) 生成の速さ 7.8〜10
-
Ornith-1.5-9B Q8_0コンテキスト長 131,072 推定 15.2 GB 残り 1.97 GB 生成の速さ 12〜16
-
コンテキスト長 131,072 推定 17.0 GB 残り 0.14 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 8,192 推定 17.2 GB 残り 0.02 GB(ぎりぎり) 生成の速さ 7.8〜10
-
コンテキスト長 65,536 推定 16.5 GB 残り 0.66 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 65,536 推定 16.3 GB 残り 0.89 GB 生成の速さ 8.8〜12
-
Qwen3.8-27B-Uncensored IQ4_XSコンテキスト長 8,192 推定 17.0 GB 残り 0.13 GB(ぎりぎり) 生成の速さ 7.8〜10
-
Ornith-1.0-9B Q8_0コンテキスト長 131,072 推定 14.9 GB 残り 2.23 GB 生成の速さ 13〜17
-
コンテキスト長 512 推定 2.41 GB 残り 14.8 GB 生成の速さ 90〜120
-
コンテキスト長 32,768 推定 17.1 GB 残り 0.05 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 131,072 推定 16.1 GB 残り 1.05 GB 生成の速さ 11〜15
-
コンテキスト長 40,960 推定 15.6 GB 残り 1.58 GB 生成の速さ 14〜18
-
コンテキスト長 32,768 推定 16.8 GB 残り 0.39 GB(ぎりぎり) 生成の速さ 8.9〜12
-
コンテキスト長 32,768 推定 16.8 GB 残り 0.36 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 32,768 推定 16.5 GB 残り 0.68 GB(ぎりぎり) 生成の速さ 11〜15
-
コンテキスト長 65,536 推定 16.2 GB 残り 0.96 GB 生成の速さ 9.2〜12
-
コンテキスト長 131,072 推定 14.9 GB 残り 2.26 GB 生成の速さ 13〜17
-
コンテキスト長 8,192 推定 17.0 GB 残り 0.14 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
Ternary-Bonsai-2-27B Q2_0コンテキスト長 65,536 推定 13.1 GB 残り 4.06 GB 生成の速さ 16〜21
-
コンテキスト長 32,768 推定 15.5 GB 残り 1.71 GB 生成の速さ 9.9〜13
-
コンテキスト長 131,072 推定 14.1 GB 残り 3.12 GB 生成の速さ 14〜18
-
コンテキスト長 8,192 推定 17.0 GB 残り 0.13 GB(ぎりぎり) 生成の速さ 7.8〜10
-
コンテキスト長 8,192 推定 17.1 GB 残り 0.08 GB(ぎりぎり) 生成の速さ 7.8〜10
-
Wan2.1 IQ3_Sコンテキスト長 32,768 推定 16.0 GB 残り 1.21 GB 生成の速さ 9.5〜13
-
コンテキスト長 32,768 推定 15.5 GB 残り 1.71 GB 生成の速さ 9.9〜13
-
コンテキスト長 65,536 推定 12.5 GB 残り 4.72 GB 生成の速さ 29〜39
-
コンテキスト長 65,536 推定 16.3 GB 残り 0.89 GB 生成の速さ MoE のため推定なし
-
コンテキスト長 16,384 推定 16.9 GB 残り 0.29 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 131,072 推定 8.42 GB 残り 8.76 GB 生成の速さ 23〜31
-
コンテキスト長 262,144 推定 12.4 GB 残り 4.82 GB 生成の速さ 45〜60
32 GB のとき
モデルごとに1件、このメモリに収まる量子化のうち、8K トークン以上のコンテキストで収まる中でファイルが最も大きい(精度が高い)ものを、よく使われている順に最大30件出しています。コンテキスト長は、その量子化が収まる最も長い値です(埋め込みモデルなど、扱える長さが 8K より短いモデルはその最大の長さ)。会話・文章の生成以外のモデルには用途を付けています。「残り」はメモリの量から推定を引いた値で、容量の 5% 未満は「ぎりぎり」としています(収まることの保証ではありません)。
-
Qwen3.8-27B UD-Q8_K_XLコンテキスト長 16,384 推定 33.7 GB 残り 0.63 GB(ぎりぎり) 生成の速さ 3.8〜5.1
-
Ornith-1.5-9B BF16コンテキスト長 262,144 推定 28.1 GB 残り 6.24 GB 生成の速さ 6.5〜8.7
-
コンテキスト長 131,072 推定 33.0 GB 残り 1.36 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 65,536 推定 33.2 GB 残り 1.13 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 16,384 推定 33.7 GB 残り 0.63 GB(ぎりぎり) 生成の速さ 3.8〜5.1
-
コンテキスト長 262,144 推定 33.6 GB 残り 0.74 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 131,072 推定 26.9 GB 残り 7.44 GB 生成の速さ 7.0〜9.3
-
コンテキスト長 32,768 推定 34.0 GB 残り 0.34 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 262,144 推定 29.7 GB 残り 4.66 GB 生成の速さ 5.0〜6.7
-
コンテキスト長 32,768 推定 32.4 GB 残り 1.96 GB 生成の速さ 4.1〜5.5
-
Ornith-1.0-9B BF16コンテキスト長 262,144 推定 27.6 GB 残り 6.72 GB 生成の速さ 6.7〜8.9
-
コンテキスト長 512 推定 2.41 GB 残り 31.9 GB 生成の速さ 90〜120
-
コンテキスト長 16,384 推定 34.1 GB 残り 0.30 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
コンテキスト長 262,144 推定 28.1 GB 残り 6.26 GB 生成の速さ 6.5〜8.7
-
コンテキスト長 40,960 推定 23.3 GB 残り 11.1 GB 生成の速さ 7.3〜9.8
-
コンテキスト長 16,384 推定 33.7 GB 残り 0.63 GB(ぎりぎり) 生成の速さ 3.8〜5.1
-
コンテキスト長 131,072 推定 31.7 GB 残り 2.65 GB 生成の速さ MoE のため推定なし
-
コンテキスト長 65,536 推定 26.9 GB 残り 7.46 GB 生成の速さ 7.3〜9.8
-
コンテキスト長 262,144 推定 28.1 GB 残り 6.26 GB 生成の速さ 6.5〜8.7
-
コンテキスト長 262,144 推定 27.6 GB 残り 6.75 GB 生成の速さ 6.7〜8.9
-
コンテキスト長 65,536 推定 34.3 GB 残り 0.06 GB(ぎりぎり) 生成の速さ MoE のため推定なし
-
Ternary-Bonsai-2-27B Q2_0コンテキスト長 262,144 推定 26.0 GB 残り 8.35 GB 生成の速さ 16〜21
-
コンテキスト長 262,144 推定 30.5 GB 残り 3.86 GB 生成の速さ 9.9〜13
-
コンテキスト長 262,144 推定 18.4 GB 残り 16.0 GB 生成の速さ 14〜18
-
Ornith-1.0-35B Q6_Kコンテキスト長 131,072 推定 32.3 GB 残り 2.02 GB 生成の速さ MoE のため推定なし
-
コンテキスト長 32,768 推定 33.6 GB 残り 0.77 GB(ぎりぎり) 生成の速さ 4.0〜5.3
-
コンテキスト長 16,384 推定 33.7 GB 残り 0.63 GB(ぎりぎり) 生成の速さ 3.8〜5.1
-
Wan2.1 IQ4_NLコンテキスト長 65,536 推定 34.3 GB 残り 0.03 GB(ぎりぎり) 生成の速さ 4.2〜5.6
-
コンテキスト長 262,144 推定 30.5 GB 残り 3.86 GB 生成の速さ 9.9〜13
-
コンテキスト長 65,536 推定 12.5 GB 残り 21.9 GB 生成の速さ 29〜39
よくある質問
- Apple M1 Pro でどんなローカルLLMが動きますか?
- 当サイトでは 965 モデルに、32GB・8,192 トークンで収まる量子化があります(推定)。よく使われているのは Qwen3.8-27B・Ornith-1.5-9B・Huihui-Qwen3.6-35B-A3B-abliterated-MTP・Ornith-1.5-35B-A3B・Huihui-Qwen3.8-27B-abliterated などです。
- Apple M1 Pro で動く、いちばん大きいモデルは?
- 当サイトに載っている中では Mixtral-8x22B-Instruct-v0.1(約 140.6B)で、IQ1_S なら 32GB に収まります(8,192 トークンの推定)。
- Apple M1 Pro で文章を生成する速さは?
- メモリ帯域が 200 GB/s なので、たとえば Qwen3.8-27B の UD-Q8_K_XL(31.5 GB)なら、推定で毎秒 3.8〜5.1 トークンほどです(帯域 ÷ ファイルサイズの 6〜8 割。プロンプトの読み込みは含みません)。