NVIDIADesktopowe GPUPoprzednia generacja

NVIDIA GeForce RTX 3080 Ti do lokalnych LLM

Autor: Jakub Rusinowski · Ostatnia aktualizacja: 19 września 2026

Z 12 GB GDDR6X przy 912 GB/s RTX 3080 Ti uruchamia 74 modele z katalogu przy Q4_K_M i kontekście 8K. Największy, który się mieści, to Gemma 3 12B Instruct (~11.1 GB), a najlepszy wybór to Cosmos 3 Nano przy 51–99 tok/s.

12 GB przy 912 GB/s — nietypowo wysoka przepustowość jak na tę pojemność, co odpowiada modelom mieszczącym się w 12 GB i ograniczonym przepustowością. Tylko rynek wtórny.

Sprawdź mój sprzęt →Pełna tabela benchmarków

Modele, które działają na RTX 3080 Ti

Q4_K_M, kontekst 8K, 12 GB do wykorzystania. Uszeregowane według jakości i szybkości.

Model	VRAM	Szybkość	Zmieści się?
Cosmos 3 Nano Cosmos 3	10.5 GB	51–99 tok/s	Mieści się
Ministral 3 14B Ministral 3	9.3 GB	35–67 tok/s	Mieści się
DeepSeek R1 Distill Qwen 14B DeepSeek R1	10.6 GB	35–67 tok/s	Mieści się
Mellum2.1 12B Thinking Mellum2.1	9 GB	134–257 tok/s	Mieści się
Gemma 4 12B (Unified) Gemma 4	8 GB	40–76 tok/s	Mieści się
Mistral NeMo 12B Mistral Family	9.4 GB	39–76 tok/s	Mieści się
Bielik PL 11B v3.0 Instruct Bielik	7.4 GB	42–81 tok/s	Mieści się
Llama 3.2 Vision 11B Llama 3.2 Vision	8.5 GB	43–83 tok/s	Mieści się
Llama 3.2 11B Vision Instruct Llama 3.2 Family	8.5 GB	43–83 tok/s	Mieści się
Falcon 3 10B Instruct Falcon 3	8.4 GB	44–84 tok/s	Mieści się
Qwen 3.5 9B Qwen 3.5	6.5 GB	56–107 tok/s	Mieści się
GLM-4 9B GLM-4.7 / GLM-Z1	6.2 GB	49–94 tok/s	Mieści się

Pokazano 12 z 74

Kup kartę lub wynajmij tyle samo pamięci

Kup kartę albo wynajmij na godziny GPU z taką samą pamięcią, by najpierw wypróbować modele.

Kup ten sprzęt Intel Arc B580 12GB — 12 GB VRAM · 190 W board power Uruchom w chmurze RTX 4090 w RunPod — od $0.34/godz. · stawka sprawdzona 2026-07

lub porównaj w Vast.ai od $0.35/godz. (typical low · varies)

Jako partner Amazon zarabiamy na kwalifikujących się zakupach. Linki do chmurowych GPU są linkami polecającymi — możemy otrzymać prowizję bez dodatkowych kosztów dla Ciebie.

Szybkość na tle innych GPU

Llama 3.1 8B, Q4_K_M. Szacowane zakresy. Jak to liczymy

H100 80GB (SXM)157–327 tok/s H100 80GB (PCIe)120–250 tok/s RTX 5090113–234 tok/s RTX PRO 6000 Blackwell113–234 tok/s RTX PRO 6000 Blackwell (Max-Q Edition)113–234 tok/s A100 80GB (PCIe)102–196 tok/s RTX PRO 5000 Blackwell (48 GB)94–194 tok/s RTX PRO 5000 Blackwell (72 GB)94–194 tok/s RTX 3080 Ti59–112 tok/s

Specyfikacja

Specyfikację zaktualizowano 2026-09-19.

Pamięć: 12 GB GDDR6X
Przepustowość pamięci: 912 GB/s
Szyna pamięci: 384-bit
Architektura: Ampere GA102
Seria: RTX 30-series
Pobór mocy: 350 W
Rok premiery: 2021
Cena premierowa: $1,199
Backendy obliczeniowe: CUDA
Dostępne dla modeli: 12 GB

Najlepsze doused 12 GBvalue inferencehigh bandwidth per pound

Podobne GPU

NVIDIA GeForce RTX 3080 12GB12 GB · 912 GB/sTyle samo VRAM, taka sama przepustowość NVIDIA GeForce RTX 507012 GB · 672 GB/sTyle samo VRAM, −26% przepustowości · $549 NVIDIA GeForce RTX 5070 Ti Laptop GPU12 GB · 672 GB/sTyle samo VRAM, −26% przepustowości

Najczęstsze pytania

Czy NVIDIA GeForce RTX 3080 Ti uruchomi lokalne LLM?

Tak. Z 12 GB (12 GB dostępne dla modelu) uruchamia 74 modele z katalogu przy Q4_K_M i kontekście 8K; największy to Gemma 3 12B Instruct, potrzebuje około 11.1 GB.

Jak szybki jest NVIDIA GeForce RTX 3080 Ti w inferencji AI?

Szacujemy, że uruchamia Llama 3.1 8B z szybkością 59–112 tok/s przy Q4_K_M. Llama 3.3 70B się nie mieści: potrzebuje około 44 GB, a dostępne jest 12 GB. To szacunki z modelu przepustowości pamięci, nie pomiary; wzór jest na stronie metodologii.

Jakie LLM uruchomię na 12 GB?

Wśród najlepszych, które się mieszczą: Cosmos 3 Nano, Ministral 3 14B, DeepSeek R1 Distill Qwen 14B, Mellum2.1 12B Thinking, Gemma 4 12B (Unified).

Więcej o tej karcie

Narzędzia

Poradniki