RunPodでgemma3:27bを16GBと24GBで実測。借りるのは簡単でも、安いGPUが得とは限らない理由を数字で整理します。
関連記事としては
BlogRunPod vs Vast.ai GPUレンタル実測 — 初めてはRunPod、最安はVastの2択RunPodとVast.aiを実測比較。速さではなく運用品質で選ぶべき理由、コールドスタート、信頼性、課金停止の差を整理します。→ もあわせて読むと、今回の論点とのつながりを把握しやすくなります。
TL;DR: RunPodでGPUを借りてローカルLLMを試すとき、16GBを選ぶと安いはずなのに、実際は7.5倍割高になり得ます。同じ gemma3:27b を RTX A4000(16GB) と RTX 4090(24GB) で回した実測をもとに、どのGPUを借りるべきかを判断できるように整理しました。
RunPodでGPUを借りてローカルLLMを動かすとき、16GBを選ぶと安いはずなのに、実際は7.5倍割高になり得る理由が分かります。
同じ gemma3:27b を RTX A4000(16GB) と RTX 4090(24GB) で回した実測をもとに、どのGPUを借りるべきかを判断できるようにします。
借りるのは簡単、時給もかなり安いです。ですが、安い16GBは7.5倍割高でした。
ここは最初に言い切っておきます。RunPodは入口としてかなり使いやすいです。前払いクレジット制で、使いすぎを構造的に防ぎやすい。Pod を立てるのも驚くほど速い。しかも、時給39円台から触れます。
でも、「一番安いGPUを選べば得」ではありません。 VRAMにモデルが収まらないと、LLMはCPU混在に落ちて一気に遅くなります。今回の実測では、16GBは24GBの約20.7倍遅く、仕事量あたりでは7.5倍割高でした。
先に公平を期しておくと、これは 17GBある gemma3:27b を16GBに載せようとして「あふれた」ケースの話です。モデルがちゃんと16GBに収まるなら(7B〜12B級など)、16GBは普通に実用になります。 安い16GBが罠になるのは「収まらないモデルを無理に載せたとき」だけ、と覚えてください。
gemma3:27b⚠️ RunPodは「止めたつもり」で課金が終わらないことがあります。停止だけではなく、不要になったら必ずTerminateしてください。auto-pay は任意でOFFにできますが、設定を見落とすと想定外の入金につながります。
RunPodは、GPUレンタルの面倒さがかなり薄いです。Pod をデプロイすると、数十秒で root@...:/# のプロンプトが出ました。ここは予想以上でした。

接続経路も複数あります。
特にありがたいのは、SSH鍵を先に入れていなくても Web terminal からその場で触れることです。最初の一歩で詰まらない。これは地味ですが効きます。

RunPod の入口を試すなら、まずはここで十分です。
📌 この記事の RunPod へのリンクは**紹介リンク(アフィリエイト)**です。下のリンクから新規登録して $10 入金すると、あなたと私の双方に少額のクレジットが入ります。料金や中身は、自分で実際に借りて確かめたうえで書いています(使っていないサービスは勧めない方針です)。
👉 RunPod を試す: https://runpod.io?ref=8f3bejl2
今回の前提は次の通りです。
前払いクレジットは $150 などまとめて入れる方式で、残高が尽きると Pod が止まります。逆に言うと、勝手に青天井で課金されないのが安心材料です(auto-pay は任意でOFFにできます)。なお、ここで挙げる料金は 2026-06-02 時点のもので、1USD≒157円で概算しています。為替とRunPod側の改定で変わるので、最終的には自分の画面で確認してください。

実際のデプロイ画面では、時給と内訳がそのまま見えます。下は RTX A4000 を選んだときの例で、合計 時給$0.26(GPU $0.25+ディスク類)と、停止中のコストまで明示されます。

ここで一度、足元を見ておきます。時給が安いことと、安く終わることは別です。LLMは「借りたGPUの値段」より、1トークンをどれだけ速く出せるかのほうが効いてきます。
16GB側は、モデルが VRAM に収まりませんでした。
今回の gemma3:27b は約17GB級です。つまり、16GBのGPUにそのまま載せるのは無理です。ここで何が起きるかというと、LLMは低速なシステムRAM側も使う構成に逃げます。結果、賢さは同じでも、とにかく遅い。
実測値は次の通りです。
RTX A4000(16GB)
正直、ここは少し迷いました。安いので「軽いモデルなら実用になるだろう」と期待したくなる気持ちは分かります。ですが、27B級ではその期待は外れました。
24GB側は、ちゃんとVRAMに収まりました。すると話はかなり素直です。
RTX 4090(24GB)
これはかなりはっきりした差でした。同じモデルなのに、体感が別物です。
16GBでは「待つ」のが仕事になっていましたが、24GBでは普通に対話できます。実際に触ると、この差は地味に効きます。待ち時間が短いだけで、検証の回転数がかなり変わります。
今回いちばん大事な数字です。
つまり、時給が安いGPUが、必ずしも安いとは限らないわけです。
ここは少し冷たい真実ですが、LLM運用ではかなり重要です。時給39円は魅力的です。ですが、1トークンを出すのに極端に時間がかかるなら、総額では高くつく。
なお、この20倍という差は「VRAMあふれ」と「カード自体のメモリ帯域差(4090は約1008GB/s、A4000は約448GB/s)」の合わせ技です。仮に16GBに収まるモデルだったとしても、帯域差のぶんだけ4090のほうが速くはなります(理論上はおよそ半分の速度)。ここまで桁違いになるのは、あくまで「あふれた」からです。
ここを誤解しやすいので、はっきり書きます。
VRAM容量は「モデルの賢さ」を決めません。 同じモデルを動かしている限り、回答の中身は同じです。違うのは、その賢さをどれだけ速く引き出せるかです。
今回も、gemma3:27b は大きいだけあって、内容そのものはかなり強いです。量子コンピュータの説明まで普通に高品質でした。
一方で、小さい gemma3:4b は事実の取り違えが出ました。たとえば「日本の第二の首都=福岡」のような誤答です。
つまり、VRAMが足りないことによる遅さと、モデル自体の賢さの差は別問題です。逆に、量子化を工夫すれば小さいVRAMでも大きめのモデルが「収まる」ことはあります(
BlogVRAM12GBで35Bクラスが動く時代、Qwen3.5で確かめた3つの事実Qwen3.5-35B-A3BをRTX 4070 Ti(VRAM 12GB)で動かした記録。Ollama非対応・Q2_K_L不可・IQ2_XSで突破。24問ベンチマーク:170/240 Rank B、113 tok/s。→も参考になります)。鍵はいつも「そのGPUにモデルが収まるか」です。
LLM の文章生成は、かなりの部分がメモリ帯域に律速されます。ざっくり言うと、
生成速度 ≒ GPUメモリ帯域(GB/s) ÷ モデルサイズ(GB) × 効率(0.6〜0.85)
この見方で、4090の実測 47.4 tokens/s は理論値の8割近くで、だいたい筋が通ります。 そして、VRAMからあふれた瞬間に低速なシステムRAMへ逃げると崖落ちする。今回の16GBは、まさにそこにはまりました。
結論はシンプルです。
言い換えると、**借りるのは「一番安いGPU」ではなく「動かすモデルが収まる最小GPU」**です。
27B級なら、RunPodでは RTX 4090 / 3090 の24GBクラスをまず見るのが現実的です。RunPod は入口として十分易しく安いので、クラウドGPUの試走には向いています。
RunPod には B300 や H200 のような業務用から、RTX 4090・3090・A4000 のようなコンシューマ/ワークステーション向けまで幅広く並びます。価格は時給で一覧表示されるので、「動かすモデルが収まる最小GPU」を価格順に探すのがやりやすいです。


RunPodの選び方を詰めるなら、ここから新規登録して触ってみてください。
📌 再掲(紹介リンク/アフィリエイト): 下のリンク経由の新規登録+$10入金で、双方に少額クレジットが入ります。
👉 RunPod を試す: https://runpod.io?ref=8f3bejl2

最後に、RunPodで触り終わったあとに確認すべきことをまとめます。
今回の判断材料はこれで十分です。
この結論を一度持っておくと、GPUを選ぶときの迷いがかなり減ります。
計測は 2026-06-02 に実施しました。各 Pod では Ollama を入れて、同じモデルを次のように動かしただけです。
# どちらのGPUでも同じコマンド。違うのは載せたGPUだけ
ollama run gemma3:27b
gemma3:27b(Ollama)を RTX A4000(16GB) と RTX 4090(24GB) の2台で動かして計測しました。いいえ。同じモデルを動かす限り、回答の中身(賢さ)は変わりません。違うのは速さだけです。16GBで遅くなるのは、モデルがVRAMに収まらず低速なシステムRAMへあふれるためで、出力の質は落ちません。一方、小さいモデル(例: gemma3:4b)に変えると、速くなる代わりに事実の誤りは増えます。
なりません。今回の実測では、時給39円のA4000(16GB)は遅すぎて、仕事量(生成1トークン)あたりでは4090(24GB)の約7.5倍のコストでした。「時給の安さ」ではなく「1トークンあたりの単価」で比べてください。
Pod をStop(停止)するだけでは不十分です。停止中もディスク維持費が少しかかります。完全に課金を止めたいなら Terminate(削除) してください。auto-pay をONにしていると残高低下時に自動入金されるので、不要ならOFFを確認します。
「一番安いGPU」ではなく「動かすモデルが収まる最小のGPU」です。7B〜12B級なら16GBでも成立しやすく、27B級を実用的に回すなら24GB(RTX 4090 / 3090)が最低ラインです。
HW系エンジニアとして20年以上、10,000件を超える顧客訪問と2,000件を超える単独ソリューション実績。AIツールを使った個人開発やIoT農園など、Raspberry Piを使ったオートメーション化なども実践中です。エンジニア専門結婚相談所も運営中で、ClaudeCodeで解決しづらい心の課題も、現場感をもって向き合っています。
META-MARK × AI
ローカルAIを動かすGPU、ちゃんと選べていますか?
VRAM・性能・コスパをMetaScoreで数値化。AIアプリ別の推奨ハードウェア要件も確認できます。