GPU × ローカルモデル互換性
RTX 4060 Ti 16 GBでDeepSeek R1 Distill Qwen 14Bは動く？
はい、動作します。
推奨量子化では約11.84GB必要で、このGPUには4.16GBの余裕があります。
11.84GB必要メモリ
16.00GB使用可能メモリ
4.16GBメモリ余裕
Q4_K_M推奨量子化
8Kコンテキスト
Q5_K_M・8Kの軽量設定なら動作します。
計算による推定で、実測ベンチマークではありません。
GPU × ローカルモデル互換性
推奨量子化では約11.84GB必要で、このGPUには4.16GBの余裕があります。
Q5_K_M・8Kの軽量設定なら動作します。
計算による推定で、実測ベンチマークではありません。