短片:🔥顯卡沒換 效能直接翻倍!🚀
開發者最新實測顯示,AMD Radeon AI PRO R9700 32GB 不需更換硬體,只靠軟體優化,就能讓地端 AI 推論效能大幅提升。透過將 NVIDIA NVFP4 模型載入時轉為 MXFP4,搭配針對 AMD RDNA4 優化的推論 Kernel,執行 Qwen3.8 27B 時,Coding 超過每秒 120 Tokens,JSON 更達 153 Tokens,8 路並行總吞吐達 471 Tokens。這代表 AMD 地端 AI 生態正逐漸成熟。對熟悉 Linux、Docker、ROCm 的開發者而言,已值得測試;但中小企業真正需要的,不只是高跑分 GPU,而是能讓多人共用、資料不外流、開機即用且有人維護的地端 AI Server。