AMD發表世界首款BF16模型，筆電NPU就能跑SD 3.0 Medium圖像生成模型

AMD與Stability AI合作推出首款採用BF16資料類型的Stable Diffusion 3.0 Medium模型，能在搭載AMD XDNA 2 NPU的筆記型或桌上型電腦生成高畫質AI影像。

Block FP16將低記憶體需求並加速AI運算

AMD於2024年Computex台北國際電腦展發表Block FP16（以下簡稱BF16）資料類型，能夠在佔用約略等同INT8資源的前提下，提供接近FP16的精確度，達到節省佔用的記憶體空間，並提高運算速度的效果。

AMD也在AMD Tech Day 2024大會詳細介紹BF16的原理與特性，相關資訊請參考下方報導，筆者就不再重覆贅述。

延伸閱讀：
Computex 2024：AMD CEO Keynote重點整理，Zen 5消費級、伺服器處理器齊發，透露Steble Diffusion 3於6月12日推出
AMD Tech Day 2024（三）：XDNA 2 AI運算架構解析，Block FP16資料類型運算效率倍增
不可以瑟瑟！Stability AI將禁止使用Stable Diffusion生成色情圖片，7月底更新使用條款

這次推出的Stable Diffusion 3.0 Medium模型的系統需求為電腦需具備XDNA 2 NPU（神經處理器），以及24 GB以上記憶體，目前Ryzen AI 300系列或Ryzen AI MAX+系列處理器內建此款NPU。

Stable Diffusion 3.0 Medium在運作時僅需約9 GB記憶體（但系統記憶體總量建議為24 GB以上），並會先生成解析度為1024 x 1024的圖像，再透過超解析度升頻提高至2048 x 2048，達到印刷的品質需求。

▲ AMD推出能在XDNA 2 NPU搭配Amuse 3.1執行的Stable Diffusion 3.0 Medium模型，讓筆記型電腦也可以生成高品質圖像。

▲ Stable Diffusion 3.0 Medium模型採用BF16資料類型，能降低記憶體需求並提高運算速度。

▲ 藉由2步驟工作流程，Stable Diffusion 3.0 Medium模型能夠輸出解析度達2048 x 2048的圖像。

免網路、免費使用

Stable Diffusion 3.0 Medium的另一大特色就是採用開源且免費的模型，且在本地端執行，也就是說能夠離線運作，並不需支付任何使用費或訂閱費，適合小型工作室快速製作品牌素材、廣告圖像、設計草圖等。

AMD也提供使用範例，使用AI生成「NPU」品牌的飲料與服裝，實現快速、反覆創作行銷圖像資源，滿足設計需求。

讀者可以下載最新AMD Adrenalin驅動程式與Amuse 3.1（或更新版本），安裝後開啟Amuse並選擇EZ Mode（簡易模式），並開啟「XDNA 2 Stable Diffusion Offload」選項，以在XDNA 2 NPU上執行Stable Diffusion 3.0 Medium。AMD也提供提示詞與設定參數範例，有興趣的讀者可以嘗試一下。

相關檔案：
Adrenalin驅動程式：https://www.amd.com/en/support/download/drivers.html
Amuse：https://www.amuse-ai.com/

提示詞範例：
「NPU」品牌飲料：
Macro photography, advertising commercial for the brand NPU. A NPU soda pop in bright colors with only big letters "NPU" logo text. There is no other text on the soda except "NPU" logo text. The background has sliced fruit and water splashing around the can. Studio setting, deep depth of field, professional photography, highly detailed.
Steps: 22, Seed: 474739515, XDNA Super Resolution On

「NPU」品牌服裝：
wide and low angle, cinematic, fashion photography for the brand NPU. Woman wearing a NPU jersey with big letters "NPU" logo text, and brown chinos. The background is a gradient, red, pink and orange, studio setting
Steps: 22, Seed: 1544622413, XDNA Super Resolution On

▲ 讀者可以下載最新AMD Adrenalin驅動程式與Amuse 3.1以使用Stable Diffusion 3.0 Medium模型進行圖像生成。

▲ Stable Diffusion 3.0 Medium所生成的圖像品質比先前SDXL更加理想。

▲ AMD也提供透過Stable Diffusion 3.0 Medium生成「NPU」品牌的飲料與服裝的範例。

▲ 本地端運算的優勢是不需網路連線且生成圖片不需額外支付費用，能夠反覆嘗試各種不同提示詞組合。

筆者認為這款Stable Diffusion 3.0 Medium模型最大的優勢，在於能在不具有獨立顯示晶片的輕薄筆記型電腦上執行，大幅降低使用門檻，讓文書筆電也能進行圖像生成並提高工作生產力。