Najlepsze lokalne LLM według VRAM

Najlepsze LLM dla 24 GB

Wybierz ilość pamięci. Szeregujemy każdy model z katalogu, który mieści się przy zalecanej kwantyzacji, według zadań, i pokazujemy, co odblokowuje kolejny poziom.

Autor: Jakub Rusinowski · Ostatnia aktualizacja:

Poziom pamięci24 GBNa przykład RX 7900 XTX, RTX 3090, RTX 4090
Modele, które się mieszczą136w całości w pamięci
Najlepszy ogólnie97Qwen 2.5 Coder 32B
Największy, który się mieści21.1 GBQwen 3.6 35B-A3B

Najlepsze przy 24 GB, według zadań

Wynik to ocena jakości dla zadania w skali 0–100; szybkość szacujemy dla RX 7900 XTX.

Najmocniejsze, które się mieszczą

Pierwsze 15 według logiki i kodu

ModelVRAMSzybkość na RX 7900 XTX (szac.)Wynik
Qwen 2.5 Coder 32B
Qwen 2.5 Family · Q4_K_M
19.3 GB~28 tok/s97
Llama 3.3 70B Instruct
Llama 3.3 · Q2_K_XS (Tight)
20.2 GB~26 tok/s97
Qwen 3 32B
Qwen 3 · Q4_K_M
19.8 GB~27 tok/s97
DeepSeek R1 Distill Qwen 32B
DeepSeek R1 · Q4_K_M
19.3 GB~28 tok/s96
Qwen 2.5 14B Instruct
Qwen 2.5 Family · Q4_K_M
8.5 GB~55 tok/s95
Qwen 3 14B
Qwen 3 · Q4_K_M
8.9 GB~53 tok/s94
Codestral 22B
Codestral · Q4_K_M
13.4 GB~38 tok/s93
Qwen 3.6 35B-A3B
Qwen 3.6 · Q4_K_M
21.1 GB~151 tok/s93
DeepSeek R1 Distill Qwen 14B
DeepSeek R1 · Q4_K_M
8.5 GB~55 tok/s92
Phi-4 (14B)
Phi-4 Family · Q4_K_M
8.5 GB~54 tok/s92
Gemma 4 31B
Gemma 4 · Q4_K_M
18.7 GB~28 tok/s92
Gemma 3 27B Instruct
Gemma 3 · Q4_K_M
16.3 GB~32 tok/s92
GLM-Z1 32B (Reasoning)
GLM-4.7 / GLM-Z1 · Q4_K_M
19.3 GB~28 tok/s92
Qwen 3.5 35B-A3B
Qwen 3.5 · Q4_K_M
21.1 GB~126 tok/s92
Mistral Small 3.1 24B
Mistral Small 3.1 · Q4_K_M
14.2 GB~36 tok/s91

FAQ

What LLMs run well with 24 GB VRAM?

Qwen 2.5 Family, Llama 3.3, Qwen 3, DeepSeek R1, Qwen 2.5 Family all fit in 24 GB VRAM.

Which GPUs have 24 GB VRAM?

AMD Radeon RX 7900 XTX, NVIDIA GeForce RTX 3090, NVIDIA GeForce RTX 4090, NVIDIA GeForce RTX 3090 Ti.

Wszystkie poziomy w skrócie

PamięćMieści sięNajlepszy ogólnie
4 GB35Shieldstral 1.0 3B
6 GB59Granite 3.0 8B Instruct
8 GB75Granite 3.0 8B Instruct
10 GB87Qwen 2.5 14B Instruct
12 GB89Qwen 2.5 14B Instruct
16 GB99Qwen 2.5 14B Instruct
20 GB116Qwen 2.5 14B Instruct
24 GB136Qwen 2.5 Coder 32B
32 GB137Qwen 2.5 Coder 32B
48 GB143Qwen 2.5 72B Instruct
64 GB148Qwen 2.5 72B Instruct
80 GB158Qwen 2.5 72B Instruct
Kup ten sprzęt AMD Radeon RX 7900 XTX 24GB — 24 GB VRAM · 355 W board powerUruchom w chmurze RTX 4090 w RunPod — od $0.34/godz. · stawka sprawdzona 2026-07

lub porównaj w Vast.ai od $0.35/godz. (typical low · varies)

Jako partner Amazon zarabiamy na kwalifikujących się zakupach. Linki do chmurowych GPU są linkami polecającymi — możemy otrzymać prowizję bez dodatkowych kosztów dla Ciebie.