<?xml version="1.0" encoding="utf-8" standalone="yes"?>
<rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom">
	<channel>
		<title>Radeon 780M 向けローカル LLM on 山村商店</title>
		<link>https://yamamurasyouten.com/ai/amd780m/</link>
		<description>Recent content in Radeon 780M 向けローカル LLM on 山村商店</description>
		<generator>Hugo</generator>
		<language>ja</language>
		
		
		
		
			<lastBuildDate>Tue, 20 Oct 2026 11:35:21 +0000</lastBuildDate>
		
			<atom:link href="https://yamamurasyouten.com/ai/amd780m/index.xml" rel="self" type="application/rss+xml" />
			<item>
				<title>【780M向け】llama.cpp Vulkan更新：RDNA2のFlash Attention速度改善と780M向け最適化</title>
				<link>https://yamamurasyouten.com/ai/amd780m/20261020t1135/</link>
				<pubDate>Tue, 20 Oct 2026 11:35:21 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/20261020t1135/</guid>
				<description>&lt;details class=&#34;toc&#34; open&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;Vulkan RDNA2 Flash Attentionの重大なボトルネック解消とWave32有効化&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;Vulkan RMS Normの共有メモリ最適化でiGPU帯域幅ボトルネックを緩和&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;Vulkan Adreno互換コンパイル不具合修正とRADVへの波及&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;VulkanバックエンドでYaRN切り捨て設定をサポートし長文コンテキスト対応&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;Vulkan環境でのGPUデバイス順序が推論性能に影響する不具合&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s7&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;article&gt;&#xA;&#xA;&lt;p&gt;llama.cpp は ggml-org が開発する C/C++ の LLM 推論エンジン。Vulkan バックエンドで AMD iGPU でも動く。&lt;/p&gt;&#xA;&lt;h2 id=&#34;s1&#34;&gt;今回の要点&lt;/h2&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;strong&gt;RDNA2 (RX 6600 XT等) の Flash Attention が大幅に高速化&lt;/strong&gt;：共有メモリの制限チェックを回避し、Wave32 実行を有効化。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;Radeon 780M 等の帯域幅制限 GPU で推論速度が向上&lt;/strong&gt;：RMS Norm の処理を共有メモリ経由に変更し、メモリトラフィックを削減。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;長文コンテキスト (YaRN) が Vulkan で利用可能に&lt;/strong&gt;：切り捨て設定 (truncation config) のサポートが追加され、コンテキスト長の有効活用が可能に。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;マルチGPU構成時の注意&lt;/strong&gt;：GPU の接続順序や優先度設定が、プロンプト処理速度 (PP) に深刻な影響を与える不具合が報告されている。&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s2&#34;&gt;Vulkan RDNA2 Flash Attentionの重大なボトルネック解消とWave32有効化&lt;/h2&gt;&#xA;&lt;h3&gt;前提&lt;/h3&gt;&#xA;&lt;p&gt;Flash Attention は、Attention 機構の計算効率を高める手法だが、GPU の共有メモリ (shmem) やレジスタ使用量に厳しい制約がある。特に AMD RDNA2 アーキテクチャでは、ドライバーの仕様チェックが最適化を阻害し、速度低下を招く場合があった。&lt;/p&gt;&#xA;&lt;h3&gt;何が変わったか&lt;/h3&gt;&#xA;&lt;p&gt;llama.cpp において、RDNA2 デバイスにおける Flash Attention のボトルネックを解消する修正が行われた。具体的には、共有メモリのサイズ制限チェックを回避し、ネイティブな Wave32 サブグループ実行を有効化する変更が適用された。これにより、レジスタ圧力の軽減とメモリスパイリングの削減が図られている。&lt;/p&gt;&#xA;&lt;h3&gt;なぜ重要か&lt;/h3&gt;&#xA;&lt;p&gt;RX 6600 XT などの RDNA2 アーキテクチャを搭載する AMD GPU ユーザーにとって、特にシーケンスコンテキストが長い場合 (n ≥ 4500 など) に顕著だった速度低下が解消される。これにより、iGPU でもより長いコンテキストを扱えるようになる。&lt;/p&gt;&#xA;&lt;h3&gt;根拠のリンク&lt;/h3&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30832&#34;&gt;Vulkan: Fix severe RDNA2 Flash Attention bottleneck by bypassing strict shmem limits and enabling Wave32 (#30832)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30832&#34;&gt;Vulkan RDNA2 Flash Attention bottleneck/slowdown fix (#30832)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h3&gt;利用者の報告&lt;/h3&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30832&#34;&gt;logankidd315-design&lt;/a&gt; 氏は、Windows 環境上の RX 6600 XT (RDNA2) で、Vulkan バックエンド使用時に Yue2 3b などのモデルで大きなコンテキスト処理時の深刻なパフォーマンス低下を報告し、本修正がその原因である特定と解決策を提示した。同氏は、厳格なドライバープロパティチェックの失敗によるキャッシュスラッシングと、大規模コンテキストでのレジスタ圧力による VGPR メモリスパイリングが主要因だと指摘している。&lt;/p&gt;&#xA;&lt;h2 id=&#34;s3&#34;&gt;Vulkan RMS Normの共有メモリ最適化でiGPU帯域幅ボトルネックを緩和&lt;/h2&gt;&#xA;&lt;h3&gt;前提&lt;/h3&gt;&#xA;&lt;p&gt;RMS Norm (Root Mean Square Layer Normalization) は LLM における正規化処理の一つ。通常、グローバルメモリ (VRAM) とのアクセスが発生するが、共有メモリ (高速だが容量が限られる) を経由することで処理効率を上げられる。&lt;/p&gt;&#xA;&lt;h3&gt;何が変わったか&lt;/h3&gt;&#xA;&lt;p&gt;RMS Norm の部分和計算 (partial sums) を、グローバルメモリではなく共有メモリを通じて行う最適化が Vulkan バックエンドに導入された。これにより、GPU 間のメモリトラフィックが削減される。&lt;/p&gt;&#xA;&lt;h3&gt;なぜ重要か&lt;/h3&gt;&#xA;&lt;p&gt;Radeon 780M などの iGPU は、独立型 GPU に比べてメモリ帯域幅が制限されている。この最適化により、帯域幅がボトルネックになりやすい環境でも、推論速度の向上が期待できる。&lt;/p&gt;&#xA;&lt;h3&gt;根拠のリンク&lt;/h3&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30826&#34;&gt;vulkan: reduce rms_norm partial sums through shared memory (#30826)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s4&#34;&gt;Vulkan Adreno互換コンパイル不具合修正とRADVへの波及&lt;/h2&gt;&#xA;&lt;h3&gt;前提&lt;/h3&gt;&#xA;&lt;p&gt;llama.cpp の Vulkan バックエンドは、Qualcomm Adreno GPU 向けのコンパイル最適化を含んでいる。一部の Adreno GPU では、特定のビット幅のベクターパック/アンパック処理でコンパイル不具合 (miscompile) が発生していた。&lt;/p&gt;&#xA;&lt;h3&gt;何が変わったか&lt;/h3&gt;&#xA;&lt;p&gt;Adreno GPU でのコンパイル不具合を回避するため、大規模なヘッドを持つ場合のスカラー Flash Attention の行数制限 (8行まで) や、8-bit ベクターパック/アンパック処理の回避といった修正が行われた。&lt;/p&gt;&#xA;&lt;h3&gt;なぜ重要か&lt;/h3&gt;&#xA;&lt;p&gt;本来は Adreno 向けの修正だが、同様のコンパイラの問題が AMD の RADV ドライバー環境でも発生する可能性がある。この修正により、RADV 環境における安定性や互換性も間接的に改善する可能性がある。&lt;/p&gt;&#xA;&lt;h3&gt;根拠のリンク&lt;/h3&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30829&#34;&gt;vulkan: cap scalar flash attention at 8 rows for large heads on Qualcomm Adreno GPUs (#30829)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30821&#34;&gt;vulkan: avoid 8-bit vector pack/unpack miscompiles on Qualcomm Adreno GPUs (#30821)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s5&#34;&gt;VulkanバックエンドでYaRN切り捨て設定をサポートし長文コンテキスト対応&lt;/h2&gt;&#xA;&lt;h3&gt;前提&lt;/h3&gt;&#xA;&lt;p&gt;YaRN (Yet another RoPE extensioN) は、LLM のコンテキスト長を拡張する技術。ただし、無限にコンテキストを延ばすと計算コストが増大するため、重要な情報を保持しつつ不要な部分を切り捨てる (truncation) 設定が有用な場合がある。&lt;/p&gt;&#xA;&lt;h3&gt;何が変わったか&lt;/h3&gt;&#xA;&lt;p&gt;Vulkan、OpenVINO、SYCL、WebGPU、RPC などのバックエンドにおいて、YaRN の切り捨て設定 (truncation config) のサポートが追加された。これにより、Vulkan 環境でもコンテキストの切り捨て制御が可能になった。&lt;/p&gt;&#xA;&lt;h3&gt;なぜ重要か&lt;/h3&gt;&#xA;&lt;p&gt;Radeon 780M などの iGPU ユーザーにとって、長文コンテキストを有効活用しつつ、メモリや計算リソースの制約を管理できるようになる。特に、VRAM が限られる環境での長文処理の柔軟性が向上する。&lt;/p&gt;&#xA;&lt;h3&gt;根拠のリンク&lt;/h3&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30802&#34;&gt;ggml: support YaRN truncation config on openvino, sycl, vulkan, webgpu, rpc (#30802)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s6&#34;&gt;Vulkan環境でのGPUデバイス順序が推論性能に影響する不具合&lt;/h2&gt;&#xA;&lt;h3&gt;前提&lt;/h3&gt;&#xA;&lt;p&gt;複数の GPU を搭載した PC では、どの GPU を推論に使用するかを指定する必要がある。Vulkan バックエンドでは、システム内の GPU デバイスの順序や優先度設定が、推論パフォーマンスに影響を与える可能性がある。&lt;/p&gt;&#xA;&lt;h3&gt;何が変わったか&lt;/h3&gt;&#xA;&lt;p&gt;GPU デバイスの順序が、プロンプト処理 (PP: Prompt Processing) のパフォーマンスに深刻な影響を与える不具合が報告されている。特に、メインの GPU 以外をディスプレイ出力用に設定した場合など、意図しない順序でデバイスが選択されると速度が大幅に低下する。&lt;/p&gt;&#xA;&lt;h3&gt;なぜ重要か&lt;/h3&gt;&#xA;&lt;p&gt;マルチ GPU 構成や、統合 GPU と独立 GPU を併用する環境において、意図した GPU が正しく選択されないまま推論が実行されると、パフォーマンスが著しく低下する可能性がある。ユーザーは、デバイス順序や指定方法に注意する必要がある。&lt;/p&gt;&#xA;&lt;h3&gt;根拠のリンク&lt;/h3&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30841&#34;&gt;Vulkan GPU device ordering affects PP performance (#30841)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h3&gt;利用者の報告&lt;/h3&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30841&#34;&gt;AlexGidarakos&lt;/a&gt; 氏は、Debian 13 環境で、メインの GPU 以外をプライマリディスプレイアダプタとして設定したところ、Vulkan を使用した Qwen MoE モデルの推論速度が深刻な低下を示したと報告している。この現象は、最新のビルド (b11738) および旧ビルド (v0.2.0) の両方で再現しており、明示的に強い GPU を指定しても、デバイス順序の影響でパフォーマンスが損なわれる可能性がある。&lt;/p&gt;&#xA;&lt;h2 id=&#34;s7&#34;&gt;出典&lt;/h2&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30832&#34;&gt;Vulkan: Fix severe RDNA2 Flash Attention bottleneck by bypassing strict shmem limits and enabling Wave32 (#30832)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30832&#34;&gt;Vulkan RDNA2 Flash Attention bottleneck/slowdown fix (#30832)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30826&#34;&gt;vulkan: reduce rms_norm partial sums through shared memory (#30826)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30829&#34;&gt;vulkan: cap scalar flash attention at 8 rows for large heads on Qualcomm Adreno GPUs (#30829)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30821&#34;&gt;vulkan: avoid 8-bit vector pack/unpack miscompiles on Qualcomm Adreno GPUs (#30821)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30802&#34;&gt;ggml: support YaRN truncation config on openvino, sycl, vulkan, webgpu, rpc (#30802)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30841&#34;&gt;Vulkan GPU device ordering affects PP performance (#30841)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;/article&gt;</description>
			</item>
			<item>
				<title>【780M向け】Mesa 26.2.5のRADVクラッシュ修正と、780MでのVulkan GDNハング回避・Qwen4exp最適化</title>
				<link>https://yamamurasyouten.com/ai/amd780m/20261019t1134/</link>
				<pubDate>Mon, 19 Oct 2026 11:34:33 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/20261019t1134/</guid>
				<description>&lt;details class=&#34;toc&#34; open&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;Mesa 26.2.5によるRADVクラッシュと780Mへの影響&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;gfx1103 (780M) でのVulkan GDNパイプラインハング&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;Vulkan Qwen4exp用Fused Kernel統合による性能向上&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;Vulkanデバイス保持機能でアイドル時消失を防ぐ&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;Vulkan量子化K/V用スパースFlash Attention&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s7&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;article&gt;&#xA;&#xA;&lt;h2 id=&#34;s1&#34;&gt;今回の要点&lt;/h2&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;Mesa 26.2.5でRADVの既知のクラッシュ（nir_opt_varyings）とレイトレーシング不具合が修正された。&lt;/li&gt;&#xA;&lt;li&gt;gfx1103（780M）でVulkan GDNモデル使用時、CPU 100%ハングする不具合が報告されている。&lt;/li&gt;&#xA;&lt;li&gt;Qwen4expモデル向けにシェーダーディスパッチを削減するFused Kernelが統合された。&lt;/li&gt;&#xA;&lt;li&gt;常時稼働環境向けに、アイドル時にVulkanデバイスが消失する問題を防ぐKeepalive機能が追加された。&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s2&#34;&gt;Mesa 26.2.5によるRADVクラッシュと780Mへの影響&lt;/h2&gt;&#xA;&lt;p&gt;Linuxのグラフィックスライブラリ「Mesa」は、VulkanドライバーRADVを通じてAMD内蔵GPU（iGPU）の性能を制御している。最新のMesa 26.2系では、最適化処理の過程でRADVがクラッシュする既知のバグが存在し、RDNA3以降のアーキテクチャを含むAMD iGPU環境に影響が及んでいた。&lt;/p&gt;&#xA;&lt;p&gt;2026年10月19日にリリースされたMesa 26.2.5では、このクラッシュの原因となる「nir_opt_varyings」最適化パスに関連する問題への対策が含まれている。これにより、RADV搭載のRadeon 780Mなどでも、推論エンジン起動時の安定性が向上する可能性がある。また、同リリースではレイトレーシングの信頼性向上や浮動小数点精度の修正も実施されており、Vulkanドライバー全体の安定性が改善されている。&lt;/p&gt;&#xA;&lt;p&gt;この変更は、Vulkan経由でローカルLLMを動作させるユーザーにとって、ドライバーレベルでの予期せぬクラッシュリスクを低減する重要な修正である。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;出典: &lt;a href=&#34;https://gitlab.freedesktop.org/mesa/mesa/-/releases/26.2.5&#34;&gt;Mesa 26.2.5 released TODAY (Oct 19)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;出典: &lt;a href=&#34;https://gitlab.freedesktop.org/mesa/mesa/-/issues (nir_opt_varyings crash)&#34;&gt;RADV nir_opt_varyings crash on Mesa 26.2+&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;出典: &lt;a href=&#34;https://9to5linux.com/mesa-26-2-5-is-out-with-bug-fixes-for-radv-nvk-anv-panvk-freedreno-and-zink&#34;&gt;Mesa 26.2.5: RADV ray-tracing/FP/race condition fixes&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s3&#34;&gt;gfx1103 (780M) でのVulkan GDNパイプラインハング&lt;/h2&gt;&#xA;&lt;p&gt;llama.cppのVulkanバックエンドを使用する際、特定のモデルアーキテクチャ（GDN: Gated Delta Network）において、gfx1103（Radeon 780M）上で処理が完全に停止する現象が報告されている。&lt;/p&gt;&#xA;&lt;p&gt;この不具合は、モデル読み込み時（load_model）にCPU使用率が100%になり、その後も処理が進まない状態（ハング）を引き起こす。具体的には、ヘッドサイズ128のGDNパイプラインがgfx1103のVulkanドライバーと互換性を持たないことが原因と推測されている。ただし、同じ780M環境でも、より小さなGDNモデル（Qwen3.6-35B-A3Bなど）を使用する場合は正常に動作するため、モデルの特定のパラメータや構造に起因する問題である。&lt;/p&gt;&#xA;&lt;p&gt;この問題は、780M搭載機でGDNアーキテクチャのモデルをVulkan経由で実行するユーザーに影響する。回避策としては、異なるモデルサイズの使用や、ドライバー/エンジン側の修正待ちが考えられる。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;出典: &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/27998&#34;&gt;llama.cpp #27998: Vulkan GDN pipeline hang on gfx1103 (RADV 780M)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s4&#34;&gt;Vulkan Qwen4exp用Fused Kernel統合による性能向上&lt;/h2&gt;&#xA;&lt;p&gt;llama.cppでは、Qwen4expアーキテクチャのモデル推論を最適化するFused Kernelの統合が進められている。これは、複数の計算ステップ（SCALE→SIGMOID→SCALE→hc_post）を単一のVulkanカーネルに統合し、シェーダーディスパッチのオーバーヘッドを削減する技術である。&lt;/p&gt;&#xA;&lt;p&gt;2026年9月28日にマージされたPR#29520、および2026年10月19日時点でのPR#30602により、この最適化が適用された。これにより、AMD iGPU上でもメモリ転送の削減と推論レイテンシの低下が期待できる。特にQwen3.8-Flash-NextなどのQwen4exp系モデルを使用する場合、Vulkanバックエンドでのパフォーマンス向上に寄与する。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;出典: &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30602&#34;&gt;llama.cpp Vulkan Qwen4exp fused kernel #30602&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;出典: &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/29520&#34;&gt;llama.cpp #29520: Vulkan Qwen4exp SCALE-SIGMOID fused kernel (merged Sep 28)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s5&#34;&gt;Vulkanデバイス保持機能でアイドル時消失を防ぐ&lt;/h2&gt;&#xA;&lt;p&gt;常時稼働するAMD iGPUサーバー（ミニPCなど）において、アイドル状態時にVulkanデバイスが「消失（device lost）」する問題への対策がllama.cppに追加された。これは、GPUが省電力モードなどに遷移した際、ドライバーがデバイスを無効化してしまうことが原因で、推論セッションが予期せず終了する要因となっていた。&lt;/p&gt;&#xA;&lt;p&gt;PR#29267およびPR#30664により、Vulkanデバイスを保持するオプション機能が導入された。これにより、アイドル時でもデバイスが消失せず、常時稼働環境での推論ノードとしての安定性が向上する。mini-PCなどで24時間稼働させるユーザーにとって、重要な安定化修正である。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;出典: &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/29267&#34;&gt;ggml-vulkan: add optional device keepalive&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;出典: &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30664&#34;&gt;llama.cpp #30664: Vulkan keepalive device&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s6&#34;&gt;Vulkan量子化K/V用スパースFlash Attention&lt;/h2&gt;&#xA;&lt;p&gt;llama.cppのVulkanバックエンドにおいて、量子化されたK/V（Key/Value）キャッシュを用いたスパースFlash Attentionの実装が進められている。これは、単一ヘッドで量子化されたKデータを用い、Vulkan上でMMQ（Multi-Matrix Multiplication）演算を最適化する技術である。&lt;/p&gt;&#xA;&lt;p&gt;この最適化（コミットb3daa07）により、メモリ帯域の効率的な利用と推論速度の向上が期待できる。特に、VRAMが限られるAMD iGPU環境において、長文コンテキストの処理効率を高める可能性がある。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;出典: &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/commit/b3daa07&#34;&gt;llama.cpp: Vulkan sparse flash attention for quantized K/V (Baked commit)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s7&#34;&gt;出典&lt;/h2&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://gitlab.freedesktop.org/mesa/mesa/-/releases/26.2.5&#34;&gt;Mesa 26.2.5 released TODAY (Oct 19)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://gitlab.freedesktop.org/mesa/mesa/-/issues (nir_opt_varyings crash)&#34;&gt;RADV nir_opt_varyings crash on Mesa 26.2+&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://9to5linux.com/mesa-26-2-5-is-out-with-bug-fixes-for-radv-nvk-anv-panvk-freedreno-and-zink&#34;&gt;Mesa 26.2.5: RADV ray-tracing/FP/race condition fixes&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/27998&#34;&gt;llama.cpp #27998: Vulkan GDN pipeline hang on gfx1103 (RADV 780M)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30602&#34;&gt;llama.cpp Vulkan Qwen4exp fused kernel #30602&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/29520&#34;&gt;llama.cpp #29520: Vulkan Qwen4exp SCALE-SIGMOID fused kernel (merged Sep 28)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/29267&#34;&gt;ggml-vulkan: add optional device keepalive&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30664&#34;&gt;llama.cpp #30664: Vulkan keepalive device&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/commit/b3daa07&#34;&gt;llama.cpp: Vulkan sparse flash attention for quantized K/V (Baked commit)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;/article&gt;</description>
			</item>
			<item>
				<title>【780M向け】llama.cpp Vulkanバックエンドの重大な性能劣化と780M環境での必須設定</title>
				<link>https://yamamurasyouten.com/ai/amd780m/20261018t1133/</link>
				<pubDate>Sun, 18 Oct 2026 11:33:58 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/20261018t1133/</guid>
				<description>&lt;details class=&#34;toc&#34; open&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;Vulkan draft-MTP推論の大幅性能劣化とMellum2/Vulkan崩壊&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;780M必須設定：mmap回避とMoE/Vulkanクラッシュ対策&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;Vulkan Q4_0高速化とQwenモデル用Tiled-Transpose最適化&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;780M実測ベンチ：Qwen3.6 35B 19.7t/s、Gemma 4 26B 25t/s&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;Vulkanデバッグラベル追加とGPUメモリ関連バグ修正&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s7&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;article&gt;&#xA;&#xA;&lt;h2 id=&#34;s1&#34;&gt;今回の要点&lt;/h2&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;strong&gt;Vulkan draft-MTP推論の大幅性能劣化&lt;/strong&gt;: 最新のVulkanバックエンド変更により、推論速度が最大6倍低下する回帰（regression）が報告されている。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;780M環境での必須ワークアラウンド&lt;/strong&gt;: AMD Radeon 780M (gfx1103) ユーザーは、ROCmの代わりにVulkan (RADV PHOENIX) を使用し、VRAM認識を回避する設定が推奨される。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;MoE推論時のクラッシュ対策&lt;/strong&gt;: MoE（Mixture of Experts）モデルのVulkan推論では、キャッシュ設定の調整が必要であり、未調整だとロード時にクラッシュする。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;Qwenモデルの最適化&lt;/strong&gt;: Qwen系モデル利用時のVulkan推論速度を改善する高速化パッチが進行中。&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s2&#34;&gt;Vulkan draft-MTP推論の大幅性能劣化とMellum2/Vulkan崩壊&lt;/h2&gt;&#xA;&lt;p&gt;今回の話題を理解するには、llama.cppにおける「draft-MTP（Multi-Token Prediction）」という推論モードの仕組みを知る必要がある。これは、モデルが生成した複数の候補トークンを一度に検証することで推論速度を向上させる技術であり、AMD iGPUユーザーにとって高速化の要となる機能だ。&lt;/p&gt;&#xA;&lt;p&gt;しかし、最近のVulkanバックエンド変更により、このdraft-MTP推論において深刻な性能劣化が発生している。具体的には、デコード処理が約4倍、プリフィル処理が約6倍も遅くなったという報告が上がっている。これは、ターゲット計算バッファがGTT（Graphics Translation Table）に再割り当てされたことが原因とみられている。&lt;/p&gt;&#xA;&lt;p&gt;この問題は、Vulkanを使用するすべてのAMDユーザーに影響する。特に、複数のGPUデバイスがシステムに存在する環境や、大きなコンテキストサイズ（例: 196608）を指定して推論を行う場合、スループットがメモリの帯域幅レベルまで低下する。ただし、コンテキストサイズを小さく（例: 8192）設定すれば、この劣化は発生しないという特性も確認されている。&lt;/p&gt;&#xA;&lt;p&gt;この問題の根拠は、以下のGitHub Issueで報告されている。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30688&#34;&gt;llama.cpp Issue: Vulkan draft-mtp decode ~4x slower, prefill ~6x slower since #30020&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30695&#34;&gt;llama.cpp Issue: ~3x decode regression with spec decode + large -c on multi-device systems&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h3&gt;利用者の報告&lt;/h3&gt;&#xA;&lt;p&gt;この性能劣化は、複数の環境で再現・検証されている。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;strong&gt;snick525&lt;/strong&gt; による報告: AMD Radeon AI PRO R9700 (RDNA4) 2枚構成、Linux 7.2.5、Mesa RADV 26.2.2の環境で、v0.7.0のVulkanバックエンド使用時にdraft-MTP推論が大幅に遅くなったと報告。&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30688&#34;&gt;Issue #30688&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;cennac&lt;/strong&gt; による報告: 複数のVulkanデバイスが_visible_ なシステムで、大きなコンテキスト（-c 196608）と推論デコード（ngram-map + draft-mtp）を使用すると、スループットが約3倍低下すると報告。_GGML_VK_VISIBLE_DEVICES_ で計算用GPUのみを指定することで回復を確認。&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30695&#34;&gt;Issue #30695&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;tczank&lt;/strong&gt; による報告: AMD RX 7900 XTX (RDNA3) 環境で、masterブランチと9月26日のビルドを比較し、draft-MTPパスが約10〜13%遅くなったと報告。キャッシュ再利用（_--cache-reuse_）を有効にすると、さらに受容率の不安定さも確認。&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30638&#34;&gt;Issue #30638&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s3&#34;&gt;780M必須設定：mmap回避とMoE/Vulkanクラッシュ対策&lt;/h2&gt;&#xA;&lt;p&gt;AMD Ryzen 内蔵GPU（Radeon 780M / gfx1103）を使用する場合、ROCmバックエンドは正式サポート外であり、クラッシュやパフォーマンス問題を引き起こしやすい。そのため、Vulkanバックエンド（Mesa RADV PHOENIX）への切り替えが推奨される。これにより、VRAM認識の問題を回避し、より安定した動作が期待できる。&lt;/p&gt;&#xA;&lt;p&gt;また、MoE（Mixture of Experts）モデルをVulkanで推論する場合、_--moe-cache-mib_ などのキャッシュ設定を誤ると、モデルロード時にクラッシュする可能性がある。これは、キャッシュスロットのサイズ計算がバックエンドの制限を超えてしまい、GPUメモリ割り当てに失敗することが原因とみられている。&lt;/p&gt;&#xA;&lt;p&gt;この問題は、以下のGitHub Issueで報告されている。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/Kalim23/Radeon-780M-ollama&#34;&gt;GitHub: Kalim23/Radeon-780M-ollama — Vulkan workaround for gfx1103 ROCm crash&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30697&#34;&gt;llama.cpp Issue: --moe-cache-mib crash at load on Vulkan (RX 6900 XT, Windows)&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h3&gt;利用者の報告&lt;/h3&gt;&#xA;&lt;p&gt;MoE推論時のクラッシュは、以下の環境で報告されている。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;strong&gt;TheColetrain&lt;/strong&gt; による報告: Windows 11、AMD Radeon RX 6900 XT (gfx1030)、公式Windows x64 Vulkanリリースzip使用。_--moe-cache-mib 8000_ を指定してQwen3.6-35B-A3Bモデルをロードしようとすると、_pre-allocated tensor_ に関するエラーでクラッシュ。&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30697&#34;&gt;Issue #30697&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;qiyuhuating&lt;/strong&gt; による報告: 上記クラッシュの原因として、MoEキャッシュスロットのサイズ計算がバックエンドの制限を超えている可能性を指摘。キャッシュ容量を保守的に減らすことで解決する可能性がある。&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30697#issuecomment-6230780512&#34;&gt;Issue #30697 Comment&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s4&#34;&gt;Vulkan Q4_0高速化とQwenモデル用Tiled-Transpose最適化&lt;/h2&gt;&#xA;&lt;p&gt;Qwen系モデル（Qwen 3.5/4など）をVulkanで推論する場合、Tiled-Transpose Concatシェーダーの最適化により、推論速度が改善される可能性がある。また、Q4_0量子化KVキャッシュに対する高速なデクアンタイズ・トランスポーズパスも追加されており、特に古いGPU（GCN1など）でのパフォーマンス向上が期待できる。&lt;/p&gt;&#xA;&lt;p&gt;これらの改善は、以下のGitHub Pull Requestで進行中。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30738&#34;&gt;llama.cpp PR: vulkan dequant+transpose fast path for Q4_0 KV cache&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30591&#34;&gt;llama.cpp PR: Vulkan tiled-transpose concat shader for Qwen models&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s5&#34;&gt;780M実測ベンチ：Qwen3.6 35B 19.7t/s、Gemma 4 26B 25t/s&lt;/h2&gt;&#xA;&lt;p&gt;2026年10月15日時点での780M（Vulkanバックエンド）の実測ベンチマークによると、Qwen3.6 35B A3B（Q8_0）で約19.7 t/s、Gemma 4 26B-A4B（Q4_K_M）で約25 t/sの生成速度が記録されている。また、MoEモデルをCPUで推論する場合、DenseモデルをGPUで推論するよりも高速になる場合があるため、環境に応じた最適な設定が求められる。&lt;/p&gt;&#xA;&lt;p&gt;詳細なベンチマークデータは、以下のサイトで確認できる。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://llamaperf.com/gpu/radeon-780m&#34;&gt;llamaperf: 780M benchmarks Oct 15&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://www.k8s.it/posts/running-a-local-llm-on-amd-radeon-780m-gfx1103-rocm-and-the-gpu-that-wasnt-supposed-to-work/&#34;&gt;Reddit: 780M with single-channel RAM — CPU beats GPU for generation&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s6&#34;&gt;Vulkanデバッグラベル追加とGPUメモリ関連バグ修正&lt;/h2&gt;&#xA;&lt;p&gt;Vulkanバックエンドのプロファイリング環境が改善されている。コマンドバッファにデバッグラベルが追加され、GPUプロファイリングツールでの解析が容易になった。また、整数Dot Productのバグ修正や、スクラッチバッファシステムの導入により、デクアンタイズ処理の速度向上が期待できる。&lt;/p&gt;&#xA;&lt;p&gt;関連するPull Requestは以下の通り。&lt;/p&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/28101&#34;&gt;llama.cpp PR: Vulkan command-buffer debug labels for GPU profilers&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30665&#34;&gt;llama.cpp PR: Vulkan scratch buffer system for dequant_kv&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30692&#34;&gt;llama.cpp Issue: vulkan int dot bug&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s7&#34;&gt;出典&lt;/h2&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30688&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/30688&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30695&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/30695&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30638&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/30638&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/Kalim23/Radeon-780M-ollama&#34;&gt;https://github.com/Kalim23/Radeon-780M-ollama&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30697&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/30697&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30738&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/30738&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30591&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/30591&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://llamaperf.com/gpu/radeon-780m&#34;&gt;https://llamaperf.com/gpu/radeon-780m&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://www.k8s.it/posts/running-a-local-llm-on-amd-radeon-780m-gfx1103-rocm-and-the-gpu-that-wasnt-supposed-to-work/&#34;&gt;https://www.k8s.it/posts/running-a-local-llm-on-amd-radeon-780m-gfx1103-rocm-and-the-gpu-that-wasnt-supposed-to-work/&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/28101&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/28101&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30665&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/30665&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/30692&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/30692&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;/article&gt;</description>
			</item>
			<item>
				<title>【780M向け】Radeon 780Mの推論速度を左右するVulkan最適化2件とStrix Haloの速度低下不具合</title>
				<link>https://yamamurasyouten.com/ai/amd780m/wp-3722/</link>
				<pubDate>Thu, 15 Oct 2026 20:38:07 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/wp-3722/</guid>
				<description>&lt;details class=&#34;toc&#34; open=&#34;&#34;&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;Vulkan RDNA3最適化: KVキャッシュ帯域幅向上とFlashAttention共用体メモリ有効化&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;Strix Halo (Vulkan) で Speculative Decode の n=4 で速度が半減する不具合&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;FreeBSD 環境で Vulkan バックエンドが CPU 過負荷/OOM/ハングする重大バグ修正&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;780M/890M 固有: MMVQ 量子化で NaN が発生する不具合と対策&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;Vulkan ビルド修正と Intel Arc Pro B65/B70 サポート追加&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s7&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;p&gt;この記事はAIによって編集・作成されています。&lt;/p&gt;</description>
			</item>
			<item>
				<title>【780M向け】Radeon 780MのVulkan推論を安定・高速化するメモリ整合性修正とRDNA3最適化</title>
				<link>https://yamamurasyouten.com/ai/amd780m/wp-3713/</link>
				<pubDate>Wed, 14 Oct 2026 20:39:04 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/wp-3713/</guid>
				<description>&lt;details class=&#34;toc&#34; open&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;Vulkan UMA環境のメモリ破損・バリア不具合修正とgpu-visible host memory改善&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;Vulkan SWA推論の速度倍増バグとtop_k関連クラッシュ対策&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;RDNA3/4向け小規模GEMMのsplit-K選択最適化で推論速度向上&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;Vulkanでbf16活性化サポートとIntel Arc Pro B65/B70対応&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;Intel Xe2(B580)でcoopmat FAがスカラFallbackする問題&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s7&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;p&gt;この記事はAIによって編集・作成されています。&lt;/p&gt;</description>
			</item>
			<item>
				<title>【780M向け】Strix Halo での推論崩れ修正と RDNA3/4 向け最適化：llama.cpp Vulkan 更新</title>
				<link>https://yamamurasyouten.com/ai/amd780m/wp-3695/</link>
				<pubDate>Mon, 12 Oct 2026 20:34:22 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/wp-3695/</guid>
				<description>&lt;details class=&#34;toc&#34; open&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;Strix Halo (gfx1151) での Vulkan 推論時のプロンプト処理崩れとクラッシュ&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;Vulkan における MUL_MAT_ID の重複 ID 処理とバグ修正&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;Vulkan Intel 向け Flash Attention カーネルの prefill 対応&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;RDNA3/4 向け Vulkan Large-Tile Split-K 最適化&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;32bit 環境向け Vulkan バッファログ出力の修正&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s7&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;p&gt;この記事はAIによって編集・作成されています。&lt;/p&gt;</description>
			</item>
			<item>
				<title>【780M向け】Radeon 780M実測: Vulkanバックエンドの高速化、性能回帰の回避策、Ollamaの検出不具合</title>
				<link>https://yamamurasyouten.com/ai/amd780m/wp-3688/</link>
				<pubDate>Sun, 11 Oct 2026 20:36:55 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/wp-3688/</guid>
				<description>&lt;details class=&#34;toc&#34; open&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;780M実測: VulkanがHIPを凌駕、Gemma 4 12Bで推論速度比較&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;Vulkanバックエンド: unified KV cache slots PRによる性能回帰と回避策&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;Vulkan RDNA3 narrow MMVQパッチで780Mの推論速度が12.2%向上&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;Ollama: gfx1103検出拒否とVulkanデバイスイヌメレーション不具合&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;780M実測ベンチ: Gemma 4 12B (20.9 t/s) と GPT-OSS 20B (UMA活用)&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s7&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;p&gt;この記事はAIによって編集・作成されています。&lt;/p&gt;</description>
			</item>
			<item>
				<title>【780M向け】llama.cpp Vulkanバックエンドの修正：ワークグループオーバーフロー回避とFlash Attentionの最適化</title>
				<link>https://yamamurasyouten.com/ai/amd780m/wp-3677/</link>
				<pubDate>Sat, 10 Oct 2026 20:35:53 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/wp-3677/</guid>
				<description>&lt;details class=&#34;toc&#34; open&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;Vulkan RMS Normのワークグループオーバーフロー修正&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;Vulkan Flash Attentionの行分割とGQA統合最適化&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;Windows NVIDIA環境でVulkanバンドル推奨へ変更&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;Vulkan: DGX Spark向けL2スケジューリングとTiled Concat追加&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;p&gt;この記事はAIによって編集・作成されています。&lt;/p&gt;</description>
			</item>
			<item>
				<title>【780M向け】llama.cpp Vulkan: Intel WindowsのVRAM認識不具合修正とCM2/デルタネット対応</title>
				<link>https://yamamurasyouten.com/ai/amd780m/wp-3663/</link>
				<pubDate>Fri, 09 Oct 2026 20:36:38 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/wp-3663/</guid>
				<description>&lt;details class=&#34;toc&#34; open&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;Vulkan: Intel Windows環境でのVRAM認識不具合の回避策&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;Vulkan: CM2行列乗算の量子化ブロックサイズ専門化&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;Vulkan: GATED_DELTA_NETのチャンク実装追加&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;p&gt;この記事はAIによって編集・作成されています。&lt;/p&gt;</description>
			</item>
			<item>
				<title>【780M向け】Radeon 780M向けVulkan最適化：VRAMリーク修正、Sparse FlashAttention対応、MoE処理の高速化</title>
				<link>https://yamamurasyouten.com/ai/amd780m/wp-3654/</link>
				<pubDate>Thu, 08 Oct 2026 20:39:02 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/wp-3654/</guid>
				<description>&lt;details class=&#34;toc&#34; open=&#34;&#34;&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;780M向けVulkan最適化と不具合修正&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;VulkanバックエンドにSparse FlashAttention（coopmat2）対応&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;MoE推論のMUL_MAT_ID重複処理と密度ゲート最適化&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;小規模行列演算のWarp最適化でiGPUリソース競合を緩和&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;maxComputeWorkGroupCount超過時の行列演算分割対応&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s7&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;p&gt;この記事はAIによって編集・作成されています。&lt;/p&gt;&#xA;&lt;article&gt;&#xA;&lt;p&gt;llama.cppはggml-orgが開発するC/C++のLLM推論エンジンで、VulkanバックエンドによりAMD iGPUでも動作します。今回の更新では、Radeon 780M (gfx1103) を含むAMD iGPU環境における推論速度の向上、VRAMリークの修正、および長文コンテキストやMoEモデルでの処理効率化が複数行われています。&lt;/p&gt;&#xA;&lt;h2 id=&#34;s1&#34;&gt;今回の要点&lt;/h2&gt;&#xA;&lt;ul&gt;&#xA;&lt;li&gt;&lt;strong&gt;VRAMリーク修正:&lt;/strong&gt; 1万トークン以上の生成後にGPUがアイドル状態になる不具合が修正されました。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;Sparse FlashAttention対応:&lt;/strong&gt; 長文コンテキスト推論時のコスト削減のため、coopmat2経由でSparse FAが利用可能になりました。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;MoE処理の最適化:&lt;/strong&gt; 不要な計算を削減するため、MUL_MAT_IDの重複処理と密度ゲートが最適化されました。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;小規模行列演算の効率化:&lt;/strong&gt; ワークグループリソースの使用を削減し、iGPUでの競合を緩和する最適化が行われました。&lt;/li&gt;&#xA;&lt;li&gt;&lt;strong&gt;ワークグループ制限の回避:&lt;/strong&gt; maxComputeWorkGroupCount超過時の行列演算分割により、起動失敗が防止されました。&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;h2 id=&#34;s2&#34;&gt;780M向けVulkan最適化と不具合修正&lt;/h2&gt;&#xA;&lt;p&gt;Radeon 780M (gfx1103) などのAMD iGPU向けに、RMSNormの融合、GET_ROWSの型アライメント、f16アキュムレータベクトルパスの導入など、推論速度向上のための最適化が行われました。また、RDNA4におけるプレフィルの回帰問題も修正されています 。&lt;/p&gt;&#xA;&lt;p&gt;特に重要なのは、VRAMリークの修正です。従来、780M環境で1万トークン以上の生成を行うとGPUが90〜92°Cまで加熱し、その後にアイドル状態になるという不具合が発生していましたが、これが解消されました。これにより、長時間の推論における安定性が大幅に向上します 。&lt;/p&gt;&#xA;&lt;p&gt;さらに、AMD iGPUにおけるチェックポイント読み込みの低速化も修正されました &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/commit/4d756bc7&#34;&gt;https://github.com/ggml-org/llama.cpp/commit/4d756bc7&lt;/a&gt;。MUL_MAT_IDにおけるFP32ソース精度の尊重も修正されており、精度面での改善が期待できます &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30105&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/30105&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;h3&gt;利用者の報告&lt;/h3&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/29965&#34;&gt;Skimmenthal13&lt;/a&gt; 氏は、Radeon 780M (gfx1103)、RADVドライバー、Mesa 26.2.4、CachyOS (kernel 7.2.8) の環境で、GLM-4.7-Flash Q4_K_Mモデルを用いたテストを行っています。コンテキストが長くなるにつれてトークン生成速度が低下する問題（Issue #19081）を報告しており、Flash Attentionの最適化による改善が期待されています &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/29965&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/29965&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/unslothai/unsloth/issues/12695&#34;&gt;Paco1960&lt;/a&gt; 氏は、Linux Mint 22.3、Radeon 780M Graphics (Phoenix / gfx1103)、Vulkan / Mesa RADV、Mesa 25.2.8、Vulkan API 1.3.275の環境で、Unsloth Studioを用いたGGUF推論テストを行っています。VulkanはGPUを正しく検出しますが、VRAM割り当て時に &lt;code&gt;ErrorOutOfDeviceMemory&lt;/code&gt; で失敗するという報告があります &lt;a href=&#34;https://github.com/unslothai/unsloth/issues/12695&#34;&gt;https://github.com/unslothai/unsloth/issues/12695&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/NousResearch/hermes-agent/issues/133259&#34;&gt;thevaprroomops-cmyk&lt;/a&gt; 氏は、Windows 11、AMD Radeon RX 9070 XT (RDNA4) および統合GPU (AMD Radeon(TM) Graphics) の環境で、Hermes Agent v0.21.5+3903 におけるVulkanビルドの性能比較を行っています。LM StudioのVulkanビルドが約30.5 tok/sであるのに対し、Hermesのビルドは約7.4–8.0 tok/sと約4倍の差があり、GPUオフロードが速度向上に繋がっていないという報告があります &lt;a href=&#34;https://github.com/NousResearch/hermes-agent/issues/133259&#34;&gt;https://github.com/NousResearch/hermes-agent/issues/133259&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;s3&#34;&gt;VulkanバックエンドにSparse FlashAttention（coopmat2）対応&lt;/h2&gt;&#xA;&lt;p&gt;長文コンテキスト推論におけるコスト削減のため、VulkanバックエンドにSparse FlashAttentionのサポートが追加されました。特にgfx1103 (RDNA3) iGPUにとって有効な最適化です 。&lt;/p&gt;&#xA;&lt;p&gt;この機能は、coopmat2経由でSparse FAのサポートが拡張される形で実装されています &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30003&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/30003&lt;/a&gt;。これにより、長いコンテキストを扱う際の計算コストを削減し、推論効率を改善することが可能になります。&lt;/p&gt;&#xA;&lt;h2 id=&#34;s4&#34;&gt;MoE推論のMUL_MAT_ID重複処理と密度ゲート最適化&lt;/h2&gt;&#xA;&lt;p&gt;MoE (Mixture of Experts) モデルにおける推論効率の改善のため、MUL_MAT_IDの重複処理と密度ゲートの最適化が行われました。従来、ループ処理されていたMoE expertの重複処理がprepassに移行され、不要な計算が削減されました &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/29998&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/29998&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;また、MUL_MAT_VEC_IDパスにおいて密度ゲートが使用されるようになり、AMD Vulkan環境でのMoE expert選択が最適化されました &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/27332&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/27332&lt;/a&gt;。これらの変更により、iGPUにおけるMoEモデルの推論パフォーマンスが向上することが期待されます。&lt;/p&gt;&#xA;&lt;h3&gt;利用者の報告&lt;/h3&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/29965&#34;&gt;Skimmenthal13&lt;/a&gt; 氏は、Radeon 780M (gfx1103)、RADVドライバー、Mesa 26.2.4、CachyOS (kernel 7.2.8) の環境で、GLM-4.7-Flash Q4_K_Mモデルを用いたテストを行っています。コンテキストが長くなるにつれてトークン生成速度が低下する問題（Issue #19081）を報告しており、Flash Attentionの最適化による改善が期待されています &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/29965&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/29965&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/unslothai/unsloth/issues/12695&#34;&gt;Paco1960&lt;/a&gt; 氏は、Linux Mint 22.3、Radeon 780M Graphics (Phoenix / gfx1103)、Vulkan / Mesa RADV、Mesa 25.2.8、Vulkan API 1.3.275の環境で、Unsloth Studioを用いたGGUF推論テストを行っています。VulkanはGPUを正しく検出しますが、VRAM割り当て時に &lt;code&gt;ErrorOutOfDeviceMemory&lt;/code&gt; で失敗するという報告があります &lt;a href=&#34;https://github.com/unslothai/unsloth/issues/12695&#34;&gt;https://github.com/unslothai/unsloth/issues/12695&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/NousResearch/hermes-agent/issues/133259&#34;&gt;thevaprroomops-cmyk&lt;/a&gt; 氏は、Windows 11、AMD Radeon RX 9070 XT (RDNA4) および統合GPU (AMD Radeon(TM) Graphics) の環境で、Hermes Agent v0.21.5+3903 におけるVulkanビルドの性能比較を行っています。LM StudioのVulkanビルドが約30.5 tok/sであるのに対し、Hermesのビルドは約7.4–8.0 tok/sと約4倍の差があり、GPUオフロードが速度向上に繋がっていないという報告があります &lt;a href=&#34;https://github.com/NousResearch/hermes-agent/issues/133259&#34;&gt;https://github.com/NousResearch/hermes-agent/issues/133259&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;s5&#34;&gt;小規模行列演算のWarp最適化でiGPUリソース競合を緩和&lt;/h2&gt;&#xA;&lt;p&gt;計算ユニットが限られるiGPU向けに、小規模行列演算 (small matmul) のワークグループリソース使用量が削減されました。具体的には、小規模な行列演算タイルにおいて、1つのサブグループにつき1つのwarpタイルを使用するよう最適化されています &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30106&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/30106&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;AMD iGPUはワークグループ数が比較的小さいため、この最適化によりリソース競合を緩和し、推論効率を改善することが期待されます。&lt;/p&gt;&#xA;&lt;h3&gt;利用者の報告&lt;/h3&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/29965&#34;&gt;Skimmenthal13&lt;/a&gt; 氏は、Radeon 780M (gfx1103)、RADVドライバー、Mesa 26.2.4、CachyOS (kernel 7.2.8) の環境で、GLM-4.7-Flash Q4_K_Mモデルを用いたテストを行っています。コンテキストが長くなるにつれてトークン生成速度が低下する問題（Issue #19081）を報告しており、Flash Attentionの最適化による改善が期待されています &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/29965&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/29965&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/unslothai/unsloth/issues/12695&#34;&gt;Paco1960&lt;/a&gt; 氏は、Linux Mint 22.3、Radeon 780M Graphics (Phoenix / gfx1103)、Vulkan / Mesa RADV、Mesa 25.2.8、Vulkan API 1.3.275の環境で、Unsloth Studioを用いたGGUF推論テストを行っています。VulkanはGPUを正しく検出しますが、VRAM割り当て時に &lt;code&gt;ErrorOutOfDeviceMemory&lt;/code&gt; で失敗するという報告があります &lt;a href=&#34;https://github.com/unslothai/unsloth/issues/12695&#34;&gt;https://github.com/unslothai/unsloth/issues/12695&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/NousResearch/hermes-agent/issues/133259&#34;&gt;thevaprroomops-cmyk&lt;/a&gt; 氏は、Windows 11、AMD Radeon RX 9070 XT (RDNA4) および統合GPU (AMD Radeon(TM) Graphics) の環境で、Hermes Agent v0.21.5+3903 におけるVulkanビルドの性能比較を行っています。LM StudioのVulkanビルドが約30.5 tok/sであるのに対し、Hermesのビルドは約7.4–8.0 tok/sと約4倍の差があり、GPUオフロードが速度向上に繋がっていないという報告があります &lt;a href=&#34;https://github.com/NousResearch/hermes-agent/issues/133259&#34;&gt;https://github.com/NousResearch/hermes-agent/issues/133259&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;s6&#34;&gt;maxComputeWorkGroupCount超過時の行列演算分割対応&lt;/h2&gt;&#xA;&lt;p&gt;ワークグループ制限の小さいiGPUにおいて、行列演算ディスパッチが &lt;code&gt;maxComputeWorkGroupCount&lt;/code&gt; を超過する場合、演算を分割する対応が行われました &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/29533&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/29533&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;これにより、ワークグループ数の制限が小さいiGPU環境での起動失敗が防止され、推論の安定性が向上します。&lt;/p&gt;&#xA;&lt;h3&gt;利用者の報告&lt;/h3&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/29965&#34;&gt;Skimmenthal13&lt;/a&gt; 氏は、Radeon 780M (gfx1103)、RADVドライバー、Mesa 26.2.4、CachyOS (kernel 7.2.8) の環境で、GLM-4.7-Flash Q4_K_Mモデルを用いたテストを行っています。コンテキストが長くなるにつれてトークン生成速度が低下する問題（Issue #19081）を報告しており、Flash Attentionの最適化による改善が期待されています &lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/29965&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/29965&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/unslothai/unsloth/issues/12695&#34;&gt;Paco1960&lt;/a&gt; 氏は、Linux Mint 22.3、Radeon 780M Graphics (Phoenix / gfx1103)、Vulkan / Mesa RADV、Mesa 25.2.8、Vulkan API 1.3.275の環境で、Unsloth Studioを用いたGGUF推論テストを行っています。VulkanはGPUを正しく検出しますが、VRAM割り当て時に &lt;code&gt;ErrorOutOfDeviceMemory&lt;/code&gt; で失敗するという報告があります &lt;a href=&#34;https://github.com/unslothai/unsloth/issues/12695&#34;&gt;https://github.com/unslothai/unsloth/issues/12695&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;p&gt;&lt;a href=&#34;https://github.com/NousResearch/hermes-agent/issues/133259&#34;&gt;thevaprroomops-cmyk&lt;/a&gt; 氏は、Windows 11、AMD Radeon RX 9070 XT (RDNA4) および統合GPU (AMD Radeon(TM) Graphics) の環境で、Hermes Agent v0.21.5+3903 におけるVulkanビルドの性能比較を行っています。LM StudioのVulkanビルドが約30.5 tok/sであるのに対し、Hermesのビルドは約7.4–8.0 tok/sと約4倍の差があり、GPUオフロードが速度向上に繋がっていないという報告があります &lt;a href=&#34;https://github.com/NousResearch/hermes-agent/issues/133259&#34;&gt;https://github.com/NousResearch/hermes-agent/issues/133259&lt;/a&gt;。&lt;/p&gt;&#xA;&lt;h2 id=&#34;s7&#34;&gt;出典&lt;/h2&gt;&#xA;&lt;ul&gt;&#xA;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/commit/4d756bc7&#34;&gt;https://github.com/ggml-org/llama.cpp/commit/4d756bc7&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30106&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/30106&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30105&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/30105&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/30003&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/30003&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/29998&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/29998&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/27332&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/27332&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/pull/29533&#34;&gt;https://github.com/ggml-org/llama.cpp/pull/29533&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/ggml-org/llama.cpp/issues/29965&#34;&gt;https://github.com/ggml-org/llama.cpp/issues/29965&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/unslothai/unsloth/issues/12695&#34;&gt;https://github.com/unslothai/unsloth/issues/12695&lt;/a&gt;&lt;/li&gt;&#xA;&lt;li&gt;&lt;a href=&#34;https://github.com/NousResearch/hermes-agent/issues/133259&#34;&gt;https://github.com/NousResearch/hermes-agent/issues/133259&lt;/a&gt;&lt;/li&gt;&#xA;&lt;/ul&gt;&#xA;&lt;/article&gt;</description>
			</item>
			<item>
				<title>【780M向け】Radeon 780MのTTFTを数倍改善、長文推論のクラッシュも修正されたllama.cpp Vulkanバックエンドの最新動向</title>
				<link>https://yamamurasyouten.com/ai/amd780m/wp-3644/</link>
				<pubDate>Wed, 07 Oct 2026 20:38:32 +0000</pubDate>
				<guid>https://yamamurasyouten.com/ai/amd780m/wp-3644/</guid>
				<description>&lt;details class=&#34;toc&#34; open&gt;&lt;summary&gt;目次&lt;/summary&gt;&lt;ol&gt;&lt;li&gt;&lt;a href=&#34;#s1&#34;&gt;今回の要点&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s2&#34;&gt;Vulkan iGPUのチェックポイント読み込み高速化&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s3&#34;&gt;Vulkan FA量子化KV再量化のmaxBufferSize超過&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s4&#34;&gt;Vulkan RMS Normのサブグループ削減最適化&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s5&#34;&gt;Vulkan CM1 int8 MMQのWG Denoms不整合修正&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s6&#34;&gt;VulkanローダーのvkEnumerateInstanceVersion nullチェック&lt;/a&gt;&lt;/li&gt;&lt;li&gt;&lt;a href=&#34;#s7&#34;&gt;出典&lt;/a&gt;&lt;/li&gt;&lt;/ol&gt;&lt;/details&gt;&#xA;&lt;p&gt;この記事はAIによって編集・作成されています。&lt;/p&gt;</description>
			</item>
	</channel>
</rss>
