AMD台式机 GPU当前在售

AMD Radeon RX 9070 GRE 运行本地大模型

作者: Jakub Rusinowski · 最后更新:

凭借 12 GB GDDR6、432 GB/s 带宽,RX 9070 GRE 可在 Q4_K_M、8K 上下文下运行目录中的 74 个模型。能放下的最大模型是 Gemma 3 12B Instruct(约 11.1 GB),首选是 Cosmos 3 Nano,速度 27–56 tok/s。

12 GB GDDR6,192 位总线。AMD 标称 432 GB/s;一篇发布报道中约 482 GB/s 的数字既得不到 AMD 页面支持,也不符合总线计算。

可在 RX 9070 GRE 上运行的模型

Q4_K_M,8K 上下文,可用 12 GB。按质量和速度排序。

模型显存速度
Cosmos 3 Nano
Cosmos 3
10.5 GB27–56 tok/s
Ministral 3 14B
Ministral 3
9.3 GB18–37 tok/s
DeepSeek R1 Distill Qwen 14B
DeepSeek R1
10.6 GB18–38 tok/s
Mellum2.1 12B Thinking
Mellum2.1
9 GB73–152 tok/s
Gemma 4 12B (Unified)
Gemma 4
8 GB20–42 tok/s
Mistral NeMo 12B
Mistral Family
9.4 GB20–42 tok/s
Bielik PL 11B v3.0 Instruct
Bielik
7.4 GB22–45 tok/s
Llama 3.2 Vision 11B
Llama 3.2 Vision
8.5 GB22–46 tok/s
Llama 3.2 11B Vision Instruct
Llama 3.2 Family
8.5 GB22–46 tok/s
Falcon 3 10B Instruct
Falcon 3
8.4 GB23–47 tok/s
Qwen 3.5 9B
Qwen 3.5
6.5 GB29–60 tok/s
GLM-4 9B
GLM-4.7 / GLM-Z1
6.2 GB26–53 tok/s
显示 74 个中的 12 个

购买显卡,或租用同等显存

直接购买显卡,或按小时租用同等显存的 GPU,先试用模型。

购买此硬件 Intel Arc B580 12GB — 12 GB VRAM · 190 W board power立即云端部署 RunPod 上的 RTX 4090 — 低至 $0.34/小时 · 价格核实于 2026-07

或在 Vast.ai 比较,低至 $0.35/小时 (typical low · varies)

作为亚马逊联盟成员,我们从符合条件的购买中获得收入。云 GPU 链接为推荐链接——我们可能获得佣金,您无需额外付费。

与其他 GPU 的速度对比

Llama 3.1 8B,Q4_K_M。估算区间。 计算方法

规格

规格更新于 2026-10-07。

显存
12 GB GDDR6
内存带宽
432 GB/s
显存位宽
192-bit
架构
RDNA 4 Navi 48
系列
RX 9000-series
整卡功耗
220 W
发布年份
2025
计算后端
ROCM, VULKAN
模型可用
12 GB
最适合12 GBRDNA 4

相似 GPU

常见问题

AMD Radeon RX 9070 GRE 能运行本地大模型吗?

可以。它有 12 GB(模型可用 12 GB),在 Q4_K_M、8K 上下文下可运行目录中的 74 个模型;最大的是 Gemma 3 12B Instruct,约需 11.1 GB。

AMD Radeon RX 9070 GRE 的 AI 推理速度有多快?

估计它在 Q4_K_M 下运行 Llama 3.1 8B 的速度为 31–64 tok/s。Llama 3.3 70B 放不下:约需 44 GB,而可用只有 12 GB。这些是基于内存带宽的模型估算,并非实测;公式见方法说明页。

12 GB 能运行哪些大模型?

能放下的最佳模型包括:Cosmos 3 Nano、Ministral 3 14B、DeepSeek R1 Distill Qwen 14B、Mellum2.1 12B Thinking、Gemma 4 12B (Unified)。