DeskGPU
日本語

NVIDIA GeForce RTX 5060 Ti 16GB で phi-4 を動かせる？

このページはAIが自動的に作成・翻訳し、人手による編集なしに、ソフトウェアが出典と照合して確認したものです。仕様は記載の出典に基づいています。必要なメモリ量と速度は、公開されている計算式による推定です。 AIの利用について

収まる llama.cpp の既定のロード確認では、phi-4 は Q5_K_M、コンテキスト 8,192 トークンで NVIDIA GeForce RTX 5060 Ti 16GB に収まります。「収まる」とするには、1 枚あたり 12.8 GiB の利用可能なメモリが必要です。

Q5_K_M では、収まる最長のコンテキスト長は 8,448 トークンです。

「収まる」とは、llama.cpp のデフォルトの --fit 読み込みチェックで、すべてのレイヤーが GPU に配置されることを意味します。つまり、当サイトによる llama.cpp のバッファの推定値に、誤差マージンと、llama.cpp のカード 1 枚あたり 1 GiB のリザーブを加えた値が、利用可能として計上されたメモリ以内であることを指します。生成中のピークメモリが収まることを保証するものではありません。 結果の判定方法

値の更新日：2026年10月19日 · 計算ツール

実行プロファイル： llama.cpp、CUDA バックエンド（NVIDIA ディスクリート GPU）、全レイヤーを GPU 上に配置、Flash Attention 有効、マイクロバッチ（-ub）512、F16 の KV cache、コンテキスト長（-c）は表示のとおり。「収まる」は llama-server の既定である 4 並列シーケンス（-np auto、統合 KV cache）で判定し、「収まらない」は 1 シーケンスで判定します。GPU はアイドル状態で、他のプログラムがメモリを使用していないものとします。

「収まる」の判定で利用可能とみなすメモリ（C_low）：1枚あたり 12.88 GiB = 公称 16 GiB − 1,054 MiB（この実行プロファイルのコンシューマー向けおよびワークステーション向け GPU で測定された、公称値と報告された合計値との最大の差。この GPU 自体の合計値を報告する公開ログがないため使用）− 2,112 MiB（この実行プロファイルの公開ログで見られた最大の起動時および実行時の使用量）。64 MiB の倍数に切り捨てています。

これらの結果は、カードのデフォルト構成を前提としています。使用可能なメモリを減らす設定（たとえば、カードが対応している場合の ECC）は対象外です。

「収まらない」の判定に使うメモリ（C_high）：1 枚あたり全量の 16 GiB。 実行プロファイルとその測定結果

量子化とコンテキスト長ごとの必要メモリ

「収まる」に必要な利用可能メモリ（X、カード単体あたりの GiB）と NVIDIA GeForce RTX 5060 Ti 16GB での結果。
量子化4,0968,192
F16 29.8 GiB 収まらない30.7 GiB 収まらない
Q8_0 16.8 GiB 境界17.7 GiB 境界
Q6_K 13.5 GiB 境界14.3 GiB 境界
Q5_K_M 12.0 GiB 収まる12.8 GiB 収まる
Q4_K_M 10.5 GiB 収まる11.4 GiB 収まる
Q3_K_M 8.9 GiB 収まる9.8 GiB 収まる
Q2_K 7.4 GiB 収まる8.3 GiB 収まる

速度の上限は示していません。NVIDIA GeForce RTX 5060 Ti 16GBのメモリ帯域幅が、独立した2つのオープンな情報源で確認されていないためです。

代替候補

phi-4が収まる、その他の16 GBのGPU

出典