ai-local-lab

計測詳細

ノートPC RTX 4060 Laptop 8GB(i7-13700H/32GB) × Qwen2.5 Coder 7B Instruct

モデル情報

Qwen2.5 Coder 7B Instructのモデル情報
パラメータ数7.6B
ライセンスApache-2.0
商用利用
配布元https://huggingface.co/Qwen/Qwen2.5-Coder-7B-Instruct

計測データ

ノートPC RTX 4060 Laptop 8GB(i7-13700H/32GB)におけるQwen2.5 Coder 7B Instructの計測一覧
量子化ランタイムtok/sTTFT(ms)合計時間(ms)入出力トークン温度(℃)消費電力(W)計測日備考
Q4_K_Mollama 0.32.051.99075843112 / 2565781.22026-07-15ollama API実測(2回平均・num_predict=256・温度は計測中の最大値)

※ 数値はすべて自前機材での実測です(ollama API・2回平均・num_predict=256)。