AMD台式机 GPU上一代

AMD Radeon RX 6900 XT 运行本地大模型

作者: Jakub Rusinowski · 最后更新:

凭借 16 GB GDDR6、512 GB/s 带宽,RX 6900 XT 可在 Q4_K_M、8K 上下文下运行目录中的 81 个模型。能放下的最大模型是 OLMo 2 13B Instruct(约 15.8 GB),首选是 EuroLLM 22B。

16 GB GDDR6,512 GB/s:与 RX 6800 XT 内存系统相同,放得下的模型解码速度也相同。没有 RDNA 2 的速度校准:只有适配判断。

可在 RX 6900 XT 上运行的模型

Q4_K_M,8K 上下文,可用 16 GB。按质量和速度排序。

模型显存速度
EuroLLM 22B
EuroLLM
14.1 GB—
GPT-OSS 20B
GPT-OSS
13.8 GB—
InternLM 3 20B Instruct
InternLM 3
12.9 GB—
Cosmos 3 Nano
Cosmos 3
10.5 GB—
StarCoder 2 15B
StarCoder 2
10.8 GB—
Qwen 3 14B
Qwen 3
11.1 GB—
Phi-4 (14B)
Phi-4 Family
10.9 GB—
Cogito v1 14B
Cogito v1
10.9 GB—
Ministral 3 14B
Ministral 3
9.3 GB—
DeepSeek R1 Distill Qwen 14B
DeepSeek R1
10.6 GB—
Mellum2.1 12B Thinking
Mellum2.1
9 GB—
Gemma 4 12B (Unified)
Gemma 4
8 GB—
显示 81 个中的 12 个

购买显卡,或租用同等显存

直接购买显卡,或按小时租用同等显存的 GPU,先试用模型。

购买此硬件 AMD Radeon RX 9060 XT 16GB — 16 GB VRAM · 160 W board power立即云端部署 RunPod 上的 RTX 4090 — 低至 $0.34/小时 · 价格核实于 2026-07

或在 Vast.ai 比较,低至 $0.35/小时 (typical low · varies)

作为亚马逊联盟成员,我们从符合条件的购买中获得收入。云 GPU 链接为推荐链接——我们可能获得佣金,您无需额外付费。

与其他 GPU 的速度对比

Llama 3.1 8B,Q4_K_M。估算区间。 计算方法

规格

规格更新于 2026-10-07。

显存
16 GB GDDR6
内存带宽
512 GB/s
显存位宽
256-bit
架构
RDNA 2 Navi 21
系列
RX 6000-series
整卡功耗
300 W
发布年份
2020
计算后端
ROCM, VULKAN
模型可用
16 GB
最适合used 16 GBVulkan

相似 GPU

常见问题

AMD Radeon RX 6900 XT 能运行本地大模型吗?

可以。它有 16 GB(模型可用 16 GB),在 Q4_K_M、8K 上下文下可运行目录中的 81 个模型;最大的是 OLMo 2 13B Instruct,约需 15.8 GB。

AMD Radeon RX 6900 XT 的 AI 推理速度有多快?

本站没有 RDNA 2 Navi 21 架构的速度校准,因此只发布该卡的适配判断,不提供每秒 token 数估算。Llama 3.3 70B 放不下:约需 44 GB,而可用只有 16 GB。

16 GB 能运行哪些大模型?

能放下的最佳模型包括:EuroLLM 22B、GPT-OSS 20B、InternLM 3 20B Instruct、Cosmos 3 Nano、StarCoder 2 15B。