ai-local-lab

計測詳細

RTX A6000 48GB ワークステーション × Qwen2.5 3B Instruct

モデル情報

商用利用不可ライセンス(Qwen Research License:このモデルのライセンスは商用利用を許可していません。業務利用の前に必ず配布元のライセンス条項を確認してください。

Qwen2.5 3B Instructのモデル情報
パラメータ数3.1B
ライセンスQwen Research License
商用利用不可
配布元https://huggingface.co/Qwen/Qwen2.5-3B-Instruct

計測データ

RTX A6000 48GB ワークステーションにおけるQwen2.5 3B Instructの計測一覧
量子化ランタイムtok/sTTFT(ms)合計時間(ms)入出力トークン温度(℃)消費電力(W)計測日備考
Q4_K_Mollama 0.30.7191.31541492112 / 25661189.42026-06-16ollama API実測(2回平均・num_predict=256・温度は計測中の最大値)

※ 数値はすべて自前機材での実測です(ollama API・2回平均・num_predict=256)。