CATEGORY

ベンチマーク

LLMの速度、品質、VRAM使用量を同じ条件で比較するための測定方法と結果をまとめています。 全15件。

Llama 4 Scout・MaverickのH100適性比較

Llama 4 ScoutとMaverickを、static model revision、109B/400B total、Int4/BF16/FP8、H100 80GB/DGX host、10M/1M context、vLLM/Transformers条件へ固定し、未測定の性能と機器適性を分けます。

Gemma 3n E2B・E4B公式品質比較

Gemma 3n E2B ITとE4B ITのGoogle公表benchmarkを、variant、metric、n-shot、full precision、2GB/3GB memory、32K contextに固定し、小型端末へ適用できる範囲と未測定の速度を整理します。

Nemotron 3 NanoのH200 throughput比較

Nemotron 3 Nano 30B-A3B、gpt-oss-20b、Qwen3-30B-A3BのNVIDIA公表値を、単一H200、8K入力、16K出力へ固定し、throughput倍率、quality、context、H100・NIMへの適用外を比較します。

Gemma 4 12Bと26B-A4Bの機器適性比較

Gemma 4 12Bと26B-A4Bの現行revision、BF16・量子化artifact、MLX・Transformers・vLLM、公式load memoryを固定し、32GB Mac、24GB GPU、H100へ適用できる判断と未測定範囲を比較します。