Najlepsze lokalne LLM według VRAM

Najlepsze LLM dla 48 GB

Wybierz ilość pamięci. Szeregujemy każdy model z katalogu, który mieści się przy zalecanej kwantyzacji, według zadań, i pokazujemy, co odblokowuje kolejny poziom.

Autor: Jakub Rusinowski · Ostatnia aktualizacja:

Poziom pamięci48 GBNa przykład RTX A6000, RTX 6000 Ada Generation, L40S
Modele, które się mieszczą143w całości w pamięci
Najlepszy ogólnie98Qwen 2.5 72B Instruct
Największy, który się mieści44.3 GBQwen 2.5 VL 72B Instruct

Najlepsze przy 48 GB, według zadań

Wynik to ocena jakości dla zadania w skali 0–100; szybkość szacujemy dla RTX A6000.

Najmocniejsze, które się mieszczą

Pierwsze 15 według logiki i kodu

ModelVRAMSzybkość na RTX A6000 (szac.)Wynik
Qwen 2.5 72B Instruct
Qwen 2.5 Family · Q4_K_M
43.5 GB~10 tok/s98
Qwen 2.5 Coder 32B
Qwen 2.5 Family · Q4_K_M
19.3 GB~22 tok/s97
Llama 3.3 70B Instruct
Llama 3.3 · Q2_K_XS (Tight)
20.2 GB~21 tok/s97
Qwen 3 32B
Qwen 3 · Q4_K_M
19.8 GB~22 tok/s97
DeepSeek R1 Distill Qwen 32B
DeepSeek R1 · Q4_K_M
19.3 GB~22 tok/s96
Qwen 2.5 14B Instruct
Qwen 2.5 Family · Q4_K_M
8.5 GB~46 tok/s95
Nemotron 70B Instruct
Nemotron 70B · Q4_K_M
42.6 GB~11 tok/s94
Qwen 3 14B
Qwen 3 · Q4_K_M
8.9 GB~45 tok/s94
Codestral 22B
Codestral · Q4_K_M
13.4 GB~31 tok/s93
Qwen 3.6 35B-A3B
Qwen 3.6 · Q4_K_M
21.1 GB~158 tok/s93
DeepSeek R1 Distill Qwen 14B
DeepSeek R1 · Q4_K_M
8.5 GB~47 tok/s92
Phi-4 (14B)
Phi-4 Family · Q4_K_M
8.5 GB~46 tok/s92
Gemma 4 31B
Gemma 4 · Q4_K_M
18.7 GB~22 tok/s92
Qwen 2.5 VL 72B Instruct
Qwen 2.5 VL · Q4_K_M
44.3 GB~10 tok/s92
Gemma 3 27B Instruct
Gemma 3 · Q4_K_M
16.3 GB~26 tok/s92

FAQ

What LLMs run well with 48 GB VRAM?

Qwen 2.5 Family, Qwen 2.5 Family, Llama 3.3, Qwen 3, DeepSeek R1 all fit in 48 GB VRAM.

Which GPUs have 48 GB VRAM?

NVIDIA RTX A6000, NVIDIA RTX 6000 Ada Generation, NVIDIA L40S, NVIDIA RTX PRO 5000 Blackwell (48 GB).

Wszystkie poziomy w skrócie

PamięćMieści sięNajlepszy ogólnie
4 GB35Shieldstral 1.0 3B
6 GB59Granite 3.0 8B Instruct
8 GB75Granite 3.0 8B Instruct
10 GB87Qwen 2.5 14B Instruct
12 GB89Qwen 2.5 14B Instruct
16 GB99Qwen 2.5 14B Instruct
20 GB116Qwen 2.5 14B Instruct
24 GB136Qwen 2.5 Coder 32B
32 GB137Qwen 2.5 Coder 32B
48 GB143Qwen 2.5 72B Instruct
64 GB148Qwen 2.5 72B Instruct
80 GB158Qwen 2.5 72B Instruct
Kup ten sprzęt NVIDIA DGX Spark (128GB) — 128 GB VRAM · 150 W board powerUruchom w chmurze NVIDIA A40 w RunPod — od $0.44/godz. · stawka sprawdzona 2026-08

lub porównaj w Vast.ai

Jako partner Amazon zarabiamy na kwalifikujących się zakupach. Linki do chmurowych GPU są linkami polecającymi — możemy otrzymać prowizję bez dodatkowych kosztów dla Ciebie.