AMD Radeon RX 7900 XT 运行本地大模型
作者: Jakub Rusinowski · 最后更新:
凭借 20 GB、800 GB/s 带宽,RX 7900 XT 可在 Q4_K_M、8K 上下文下运行目录中的 103 个模型。能放下的最大模型是 Nemotron-Cascade 2 30B-A3B(约 19.9 GB),首选是 Qwen 3.6 27B,速度 17–34 tok/s。
20 GB VRAM是独特的甜蜜点——比16GB显卡能支持更大上下文的14B模型。适合想要比7800 XT更多VRAM的AMD用户。
可在 RX 7900 XT 上运行的模型
Q4_K_M,8K 上下文,可用 20 GB。按质量和速度排序。
| 模型 | 显存 · 标记 = 20 GB | 显存 | 速度 |
|---|---|---|---|
| Qwen 3.6 27B Qwen 3.6 | 17.6 GB | 17–34 tok/s | |
| Qwen 3.5 27B Qwen 3.5 | 17.1 GB | 17–35 tok/s | |
| 1-bit Bonsai 27B Bonsai 27B | 17.1 GB | 17–35 tok/s | |
| Ternary Bonsai 27B Bonsai 27B | 17.1 GB | 17–35 tok/s | |
| Ternary Bonsai 2 27B Ternary Bonsai 2 | 17.6 GB | 18–38 tok/s | |
| Trinity Mini Trinity | 16.9 GB | 90–186 tok/s | |
| Gemma 4 26B-A4B Gemma 4 | 16.5 GB | 57–118 tok/s | |
| Devstral Small 2505 24B Devstral | 16.6 GB | 19–40 tok/s | |
| Devstral Small 2 24B Devstral | 16.6 GB | 19–40 tok/s | |
| Magistral Small 24B Magistral Small | 15.3 GB | 19–39 tok/s | |
| Mistral Small 3 (24B) Mistral Family | 17.2 GB | 19–39 tok/s | |
| LFM2.5-24B-A2B LFM2.5 | 15.5 GB | 97–202 tok/s |
购买显卡,或租用同等显存
直接购买显卡,或按小时租用同等显存的 GPU,先试用模型。
或在 Vast.ai 比较,低至 $0.35/小时 (typical low · varies)
作为亚马逊联盟成员,我们从符合条件的购买中获得收入。云 GPU 链接为推荐链接——我们可能获得佣金,您无需额外付费。
与其他 GPU 的速度对比
Llama 3.1 8B,Q4_K_M。估算区间。 计算方法
规格
规格更新于 2026-07-12。
- 显存
- 20 GB
- 内存带宽
- 800 GB/s
- 架构
- RDNA 3 Navi 31
- 系列
- RX 7000-series
- 整卡功耗
- 315 W
- 发布年份
- 2022
- 首发价格
- $899
- 模型可用
- 20 GB
相似 GPU
常见问题
AMD Radeon RX 7900 XT 能运行本地大模型吗?
可以。它有 20 GB(模型可用 20 GB),在 Q4_K_M、8K 上下文下可运行目录中的 103 个模型;最大的是 Nemotron-Cascade 2 30B-A3B,约需 19.9 GB。
AMD Radeon RX 7900 XT 的 AI 推理速度有多快?
估计它在 Q4_K_M 下运行 Llama 3.1 8B 的速度为 47–98 tok/s。Llama 3.3 70B 放不下:约需 44 GB,而可用只有 20 GB。这些是基于内存带宽的模型估算,并非实测;公式见方法说明页。
20 GB 能运行哪些大模型?
能放下的最佳模型包括:Qwen 3.6 27B、Qwen 3.5 27B、1-bit Bonsai 27B、Ternary Bonsai 27B、Ternary Bonsai 2 27B。最快的上手方式是 Ollama:ollama run qwen3:14b。