計測詳細
RTX A6000 48GB ワークステーション × Phi-4-mini Instruct
モデル情報
| パラメータ数 | 3.8B |
|---|---|
| ライセンス | MIT |
| 商用利用 | 可 |
| 配布元 | https://huggingface.co/microsoft/Phi-4-mini-instruct |
計測データ
| 量子化 | ランタイム | tok/s | TTFT(ms) | 合計時間(ms) | 入出力トークン | 温度(℃) | 消費電力(W) | 計測日 | 備考 |
|---|---|---|---|---|---|---|---|---|---|
| Q4_K_M | ollama 0.30.7 | 166.8 | 205 | 1740 | 92 / 256 | 60 | 225.5 | 2026-06-16 | ollama API実測(2回平均・num_predict=256・温度は計測中の最大値) |
※ 数値はすべて自前機材での実測です(ollama API・2回平均・num_predict=256)。