比較
モデルを並べて比べる
モデルを最大 4 つ選ぶと、ファイルサイズ・必要メモリ・ライセンス・外部の評価を横に並べて見られます。
比較の表
| 項目 | tokyotech-llm-Llama-3.1-Swallow-8B-Instruct-v0.3 mmnga ✕ 外す |
|---|---|
| パラメータ数 | 8B |
| アーキテクチャ | llama |
| 最大コンテキスト長 | 8,192 |
| 代表の量子化とサイズ 実測 | Q4_K_M · 4.92 GB |
| 8K で必要なメモリ 推定 | 6.79 GB |
| 32K で必要なメモリ 推定 | - |
| 収まる VRAM(8K) 推定 | VRAM 8 GB〜 |
| いちばん小さい量子化(8K) 推定 | IQ1_S · 2.02 GB → 3.89 GB |
| ライセンス | Llama 3.1 Community License 条件付き |
| llama.cpp の対応 | llama.cpp b4409 より前から |
| ダウンロード(30日・合計) | 830 |
| 人の評価(LMArena) | - |
| 総合能力(Epoch AI) | - |
| 科学の難問(GPQA) | - |
- 代表の量子化は Q4_K_M(無ければいちばん小さいもの)で、ダウンロード数のいちばん多い配布元のものです。必要メモリは KV キャッシュ f16 の推定です。
- 外部の評価は、量子化する前の元のモデルを他の機関が評価した値で、当サイトの評価ではありません(出典はランキングのページ)。
- 当サイトは、どれが優れているかの判定や総合点は出しません。