192GB統合VRAMで70BローカルLLMは本当に動くのか。Panther Lakeが比較を避けた理由と、帯域幅の落とし穴まで正直に整理します。
TL;DR: ローカルLLM推論目的のミニPC構築なら、Gorgon Haloが現時点の最安x86解です。ただし「容量の勝ち」と「速度の勝ち」は別物。逆張り的に言えば、Panther Lakeが比較を避けた理由そのものが、Gorgon Haloを選ぶ根拠です。帯域幅の実効値(約180〜212 GB/s)まで理解した上で判断してください。AI開発者・研究者・クラウドコストを下げたい中小企業エンジニアに向けて整理します。
※本記事のスペックは、未発売製品(リリース予定: 2026-10-01 前後〜2027-01-01 前後)のためリーク情報、PassMark登録値、AMD関係者発言ベースです。確定情報ではありません。そこを曖昧にしたまま語ると判断を誤るので、先に明記しておきます。
AMD Gorgon Halo(Ryzen AI Max 400)は、192GBの統合メモリを使って70B級LLMをローカルで扱える、という時点でかなり異例です。RTX 4090の24GBでは最初から土俵に乗りにくい領域を、x86機で真正面から押し切ってきた形です。
ただし、ここで終わりではありません。容量は勝っていても、帯域幅が足を引っ張る。これが本質です。実効帯域は理論値273GB/sに対して、実運用では60〜70%程度、つまり約180〜212GB/sに落ちるケースがある。ここを無視すると、「70Bが動く=快適に回る」と勘違いします。
Intel Panther Lakeが比較を避けた理由も、かなり単純です。比較軸が違うからです。Panther Lakeは通常のノート/薄型PC文脈で見れば強いですが、Gorgon Haloは最初から**“192GBユニファイドメモリでローカルLLMを載せる”**という別競技。AMDのRahul Tikoo氏が示した方向性も、まさにそこです。比較を受けるほど同じ土俵ではない、ということです。
この記事では、
を、現場目線で切り分けます。
一言でいうと、“VRAM 24GBの壁”を、統合メモリの総量で踏み越える製品です。
ここが重要で、Gorgon Haloの価値は「GPUが速い」ことよりも、大きいモデルを載せられることにあります。70B級のLLMをローカルで回したい人が詰まるのは、たいてい演算性能ではなくメモリ容量です。
たとえば、4bit量子化の70Bなら24GB級でも「動く」ことはあります。ですが、それはあくまで量子化前提で、精度や挙動に妥協が入る。仕事で使うと、ここが意外と面倒です。毎回「今日はどの量子化で妥協するか」を選ぶことになるからです。
Gorgon Haloの192GBは、その妥協をかなり減らします。full precisionでの実行可能性が見えてくるのが最大の変化です。もちろん、実際のモデル、フレームワーク、実装次第で体感は変わりますが、少なくとも「容量が足りないから選択肢から外れる」という場面は激減します。
この時点で、Gorgon HaloはAI開発者、研究者、中小企業のエンジニアにとってかなり現実的です。クラウドAPIの従量課金や、機密データを外に出したくない事情があるなら、ローカルで70Bを扱える意味は大きいです。
ここは誤解しやすいのですが、Panther Lakeが弱いから比較しなかった、と短絡するのは違います。
実際には、比較の土俵が違いすぎるのが理由です。
Panther Lakeは、一般的には省電力・高効率なモバイル向けCPUとして見られるはずです。一方、Gorgon Haloは最初から巨大な統合メモリを前提に、ローカルAIワークロードを狙う設計です。
つまり、比較した瞬間にこうなります。
これではベンチマークの意味がズレます。CPUの世代比較として並べるならまだしも、70BローカルLLMの実運用で比べると、勝負はメモリ帯域と容量に寄ります。
AMD側が強調したかったのは、単純なCPU性能ではありません。192GBユニファイドメモリという、他社が真似しにくい土俵です。Intelがそこを正面から比べないのは、むしろ自然です。
要するに、これは性能表の優劣ではなく、狙っている用途が違うという話です。
動きます。ただし、条件つきです。
この「動く」は、誤解されやすい言葉です。私はここを分けて考えます。
Gorgon Haloは、1と2についてはかなり強いです。192GBあるなら、70B級モデルをローカルで扱うための余裕が大きい。ここは容量どおり、かなり順当な強みです。
ただし、3は別です。ここで帯域幅が効いてきます。
LLM推論は、特にデコード段階でメモリ転送が効きやすいです。モデル全体が載るだけでは足りず、毎トークン生成時にどれだけ素早く重みやKV cacheを扱えるかが重要になります。
だから、Gorgon Haloは「70Bを載せる」ことには強いが、「70Bを高速にしゃかしゃか生成する」ことには限界があります。
この点は、クラウドで大型GPUを使った経験がある人ほど分かりやすいはずです。容量が足りないと話にならない一方で、容量があっても帯域が弱いと、出力が思ったほど伸びません。
Gorgon Halo(またはStrix Halo)環境でLlama-3 70Bを動かす最短コマンドはこちらです。
# Ollamaで Llama-3 70B を実行(192GB統合メモリ環境)
ollama run llama3:70b
# llama.cpp で直接実行する場合(GGUF形式)
./llama-server -m llama-3-70b-instruct.Q8_0.gguf \
--n-gpu-layers 999 \
--ctx-size 8192 \
--host 0.0.0.0 --port 8080
# 帯域幅スループットを計測する場合(llama.cpp 付属ツール)
npx tsx scripts/run-benchmark.ts --model llama3:70b --backend ollama
--n-gpu-layers 999 で全レイヤーを統合GPU側に置けます。192GBあれば Q8_0(8bit量子化)でも全体を乗せられる計算です。
ここが本記事の一番大事なところです。
Gorgon Haloの帯域幅は、理論上273GB/sとされます。数字だけ見ればかなり強いです。ですが、実際の推論では60〜70%程度の実効率に落ちることが珍しくありません。つまり、実効180〜212GB/s程度で考えるべきです。
これがなぜ重要かというと、AI用途では「カタログ帯域」がそのまま速度にならないからです。
落ちる理由はだいたい次の通りです。
要するに、統合メモリだから必ず速い、ではないのです。
ここを見誤ると、「192GBあるなら70Bもサクサクだろう」と期待してしまいます。実際はそう単純ではありません。容量は圧倒的、速度は用途依存です。
この落とし穴は、他メディアがあまり正直に触れたがらない部分だと思います。ですが、購入判断ではここが一番効きます。
つまり、Gorgon Haloは「大きいモデルを載せて使える」ことが価値であって、絶対的な生成速度の王者ではありません。
ここは読者が一番気にするところでしょう。
RTX 4090は強いです。だが、24GBという上限はどうしても残る。70B級LLMをローカルで扱おうとすると、量子化が前提になりやすく、精度や運用の自由度で妥協が出ます。
一方、Gorgon Haloは、容量面では4090を明確に超える。この差はかなり大きいです。
ただし、だからといって「4090不要」とはなりません。むしろ用途は分かれます。
要するに、4090は「速く回す」ためのカード、Gorgon Haloは「載せたいものを載せる」ための解です。
この違いは、dGPU比較対象 を見ても、最後は同じところに戻ります。ローカルLLMは、性能だけでなくメモリ事情で決まる、ということです。
AIワークロード全体の整理は、AIワークロード一覧 にまとめてあります。用途が定まっていないなら、まずここから整理した方が早いです。
また、比較軸を整理したい人向けに、比較ページ も合わせて見てください。スペック表だけで迷うより、判断軸を先に固定した方が失敗しにくいです。
なお、同じ「大容量メモリでローカルLLMを回す」路線でも、ARM陣営からはNVIDIA N1X搭載ノートPC(128GBユニファイドメモリのARM SoC)が控えています。x86のGorgon Haloと正面からぶつかる選択肢なので、Windows on ARMに抵抗がなければ併せて検討する価値があります。
Strix Halo(Ryzen AI Max 300)をすでに使っている人は、ここが気になるはずです。
結論からいうと、**“困っていないなら急いで乗り換える必要はない”**です。
Strix Haloでも、かなり広い範囲のローカルAI用途はこなせます。ですが、70B級を本気で視野に入れると、メモリ容量の余裕が効いてきます。
乗り換えを考える理由は、主にこの3つです。
逆に、
なら、Strix Halo継続でも十分です。
もしあなたがStrix Haloの上位機を検討しているなら、Ryzen AI Max 395製品ページ を見比べた上で判断した方がいいです。アップグレードはスペック差だけで決めると、あとで「思ったほど変わらない」となりがちです。
ここはかなり現実的な判断になります。
この条件なら、Gorgon Haloはかなり強いです。ローカルLLM推論目的のミニPC構築としては、現時点の最安解になりうるからです。
2027年想定(2027-01-01以降が現実的)のMedusa Haloは、LPDDR6・384bitとされ、帯域面での改善が期待されています。ここが本当に来るなら、Gorgon Haloの弱点である帯域幅の詰まりが改善する可能性があります。
つまり、
です。
私はここを曖昧にしたくありません。容量の勝ちと速度の勝ちは別物です。Gorgon Haloは前者で強い。後者を求めるなら、待つ価値はあります。
最後に、購入判断をかなり実務寄りに絞ります。
この5つのうち、3つ以上が「はい」なら、Gorgon Haloはかなり有力です。
この場合、Gorgon Haloは“魅力的だけど過剰”になりやすいです。
Gorgon Haloの価値は、192GB統合メモリで70B級LLMをローカル実行できる点にあります。ここは本当に強いです。
一方で、帯域幅の実効率は60〜70%程度まで落ちる可能性があり、デコード速度は理論値ほど伸びません。この現実は無視できません。
だから結論はシンプルです。
Panther Lakeが比較を避けたのは、負けたからというより、比較の土俵が最初から違ったからです。
この違いを理解しておくと、スペック表に振り回されなくなります。購入前に見るべきなのは「何GB載るか」だけではなく、その容量を実際にどれだけ速く使えるかです。
ここを見誤らなければ、Gorgon Haloはかなり筋のいい選択になります。
llama-3-70b(約140GB BF16)はフルで乗りきらない可能性があります。ただし Q8_0(約75GB)なら余裕で収まります。Q4_0(約38GB)なら複数モデルの同時常駐も可能です。
クロック差は100MHz(約2%向上)、最大メモリが128GB→192GBが主な差分です。現在128GB構成で不満がなければ急ぐ必要はありません。Medusa Halo(2027年・LPDDR6・384bit)まで待つのも合理的です。
FP11パッケージを引き継ぐためマザーボード設計はStrix Haloと同等です。SK hynix製24GBモジュール×8枚構成がリークで確認されており、対応ミニPC(ASRock等)が2026年後半に登場する見込みです。
HW系エンジニアとして20年以上、10,000件を超える顧客訪問と2,000件を超える単独ソリューション実績。AIツールを使った個人開発やIoT農園など、Raspberry Piを使ったオートメーション化なども実践中です。エンジニア専門結婚相談所も運営中、ClaudeCodeで解決できない心の課題も解決いたします!
META-MARK × AI
ローカルAIを動かすGPU、ちゃんと選べていますか?
VRAM・性能・コスパをMetaScoreで数値化。AIアプリ別の推奨ハードウェア要件も確認できます。