Najlepsze lokalne LLM według VRAM

Najlepsze LLM dla 16 GB

Wybierz ilość pamięci. Szeregujemy każdy model z katalogu, który mieści się przy zalecanej kwantyzacji, według zadań, i pokazujemy, co odblokowuje kolejny poziom.

Autor: Jakub Rusinowski · Ostatnia aktualizacja:

Poziom pamięci16 GBNa przykład RX 9060 XT 16GB, Intel Arc Pro B50, RTX 5060 Ti 16GB
Modele, które się mieszczą99w całości w pamięci
Najlepszy ogólnie95Qwen 2.5 14B Instruct
Największy, który się mieści14.5 GBMistral Small 3 (24B)

Najlepsze przy 16 GB, według zadań

Wynik to ocena jakości dla zadania w skali 0–100; szybkość szacujemy dla RX 9060 XT 16GB.

Najmocniejsze, które się mieszczą

Pierwsze 15 według logiki i kodu

ModelVRAMSzybkość na RX 9060 XT 16GB (szac.)Wynik
Qwen 2.5 14B Instruct
Qwen 2.5 Family · Q4_K_M
8.5 GB~22 tok/s95
Qwen 3 14B
Qwen 3 · Q4_K_M
8.9 GB~22 tok/s94
Codestral 22B
Codestral · Q4_K_M
13.4 GB~15 tok/s93
DeepSeek R1 Distill Qwen 14B
DeepSeek R1 · Q4_K_M
8.5 GB~23 tok/s92
Phi-4 (14B)
Phi-4 Family · Q4_K_M
8.5 GB~22 tok/s92
Mistral Small 3.1 24B
Mistral Small 3.1 · Q4_K_M
14.2 GB~14 tok/s91
InternLM 3 20B Instruct
InternLM 3 · Q4_K_M
12.1 GB~16 tok/s91
Mistral Small 3 (24B)
Mistral Family · Q4_K_M
14.5 GB—90
Granite 3.0 8B Instruct
Granite 3.0 · Q4_K_M
4.8 GB~36 tok/s90
Ternary Bonsai 27B
Bonsai 27B · Ternary (1.58-bit, ~1.71 bpw)
5.8 GB~30 tok/s90
Qwen 2.5 7B Instruct
Qwen 2.5 Family · Q4_K_M
4.6 GB~40 tok/s89
Qwen 3 8B
Qwen 3 · Q4_K_M
5 GB~35 tok/s89
DeepSeek R1 Distill Llama 8B
DeepSeek R1 · Q4_K_M
4.8 GB~36 tok/s89
Mistral NeMo 12B
Mistral Family · Q4_K_M
7.2 GB~26 tok/s88
Devstral Small 2 24B
Devstral · Q4_K_M
14.5 GB~14 tok/s87

FAQ

What LLMs run well with 16 GB VRAM?

Qwen 2.5 Family, Qwen 3, Codestral, DeepSeek R1, Phi-4 Family all fit in 16 GB VRAM.

Which GPUs have 16 GB VRAM?

AMD Radeon RX 9060 XT 16GB, Intel Arc Pro B50, NVIDIA GeForce RTX 5060 Ti 16GB, NVIDIA GeForce RTX 4060 Ti 16GB.

Wszystkie poziomy w skrócie

PamięćMieści sięNajlepszy ogólnie
4 GB35Shieldstral 1.0 3B
6 GB59Granite 3.0 8B Instruct
8 GB75Granite 3.0 8B Instruct
10 GB87Qwen 2.5 14B Instruct
12 GB89Qwen 2.5 14B Instruct
16 GB99Qwen 2.5 14B Instruct
20 GB116Qwen 2.5 14B Instruct
24 GB136Qwen 2.5 Coder 32B
32 GB137Qwen 2.5 Coder 32B
48 GB143Qwen 2.5 72B Instruct
64 GB148Qwen 2.5 72B Instruct
80 GB158Qwen 2.5 72B Instruct
Kup ten sprzęt AMD Radeon RX 9060 XT 16GB — 16 GB VRAM · 160 W board powerUruchom w chmurze RTX 4090 w RunPod — od $0.34/godz. · stawka sprawdzona 2026-07

lub porównaj w Vast.ai od $0.35/godz. (typical low · varies)

Jako partner Amazon zarabiamy na kwalifikujących się zakupach. Linki do chmurowych GPU są linkami polecającymi — możemy otrzymać prowizję bez dodatkowych kosztów dla Ciebie.