NVIDIADesktopowe GPUPoprzednia generacja

NVIDIA GeForce RTX 2080 Ti do lokalnych LLM

Autor: Jakub Rusinowski · Ostatnia aktualizacja: 7 października 2026

Z 11 GB GDDR6 przy 616 GB/s RTX 2080 Ti uruchamia 72 modele z katalogu przy Q4_K_M i kontekście 8K. Największy, który się mieści, to Phi-4 (14B) (~10.9 GB), a najlepszy wybór to Ministral 3 14B.

11 GB GDDR6 na 352-bitowej szynie, 616 GB/s. Turing: rdzenie tensorowe FP16, ale bez BF16 i FP8. Strona nie ma kalibracji szybkości dla Turinga, więc ta karta dostaje werdykty dopasowania, ale nie szacunek tok/s.

Sprawdź mój sprzęt →Pełna tabela benchmarków

Modele, które działają na RTX 2080 Ti

Q4_K_M, kontekst 8K, 11 GB do wykorzystania. Uszeregowane według jakości i szybkości.

Model	VRAM	Szybkość	Zmieści się?
Ministral 3 14B Ministral 3	9.3 GB	—	Mieści się
Mellum2.1 12B Thinking Mellum2.1	9 GB	—	Mieści się
Gemma 4 12B (Unified) Gemma 4	8 GB	—	Mieści się
Mistral NeMo 12B Mistral Family	9.4 GB	—	Mieści się
Bielik PL 11B v3.0 Instruct Bielik	7.4 GB	—	Mieści się
Llama 3.2 Vision 11B Llama 3.2 Vision	8.5 GB	—	Mieści się
Llama 3.2 11B Vision Instruct Llama 3.2 Family	8.5 GB	—	Mieści się
Falcon 3 10B Instruct Falcon 3	8.4 GB	—	Mieści się
Qwen 3.5 9B Qwen 3.5	6.5 GB	—	Mieści się
GLM-4 9B GLM-4.7 / GLM-Z1	6.2 GB	—	Mieści się
K2 Horizon 7B K2 Horizon	7.4 GB	—	Mieści się
GLM-4.6V-Flash 9B GLM-4.6V	6.2 GB	—	Mieści się

Pokazano 12 z 72

Kup kartę lub wynajmij tyle samo pamięci

Kup kartę albo wynajmij na godziny GPU z taką samą pamięcią, by najpierw wypróbować modele.

Kup ten sprzęt Intel Arc B580 12GB — 12 GB VRAM · 190 W board power Uruchom w chmurze RTX 4090 w RunPod — od $0.34/godz. · stawka sprawdzona 2026-07

lub porównaj w Vast.ai od $0.35/godz. (typical low · varies)

Jako partner Amazon zarabiamy na kwalifikujących się zakupach. Linki do chmurowych GPU są linkami polecającymi — możemy otrzymać prowizję bez dodatkowych kosztów dla Ciebie.

Szybkość na tle innych GPU

Llama 3.1 8B, Q4_K_M. Szacowane zakresy. Jak to liczymy

H100 80GB (SXM)157–327 tok/s H100 80GB (PCIe)120–250 tok/s RTX 5090113–234 tok/s RTX PRO 6000 Blackwell113–234 tok/s RTX PRO 6000 Blackwell (Max-Q Edition)113–234 tok/s A100 80GB (PCIe)102–196 tok/s RTX PRO 5000 Blackwell (48 GB)94–194 tok/s RTX PRO 5000 Blackwell (72 GB)94–194 tok/s RTX 2080 TiSpeed not estimated

Specyfikacja

Specyfikację zaktualizowano 2026-10-07.

Pamięć: 11 GB GDDR6
Przepustowość pamięci: 616 GB/s
Szyna pamięci: 352-bit
Architektura: Turing TU102
Seria: RTX 20-series
Rok premiery: 2018
Cena premierowa: $999
Backendy obliczeniowe: CUDA, VULKAN
Dostępne dla modeli: 11 GB

Najlepsze doused 11 GB7-8B models

Podobne GPU

NVIDIA GeForce GTX 1080 Ti11 GB · 484 GB/sTyle samo VRAM, −21% przepustowości · $699 NVIDIA GeForce RTX 507012 GB · 672 GB/s+1 GB VRAM, +9% przepustowości · $549 NVIDIA GeForce RTX 5070 Ti Laptop GPU12 GB · 672 GB/s+1 GB VRAM, +9% przepustowości

Najczęstsze pytania

Czy NVIDIA GeForce RTX 2080 Ti uruchomi lokalne LLM?

Tak. Z 11 GB (11 GB dostępne dla modelu) uruchamia 72 modele z katalogu przy Q4_K_M i kontekście 8K; największy to Phi-4 (14B), potrzebuje około 10.9 GB.

Jak szybki jest NVIDIA GeForce RTX 2080 Ti w inferencji AI?

Strona nie ma kalibracji szybkości dla architektury Turing TU102, więc publikuje dla tej karty werdykty dopasowania, ale nie szacunek tokenów na sekundę. Llama 3.3 70B się nie mieści: potrzebuje około 44 GB, a dostępne jest 11 GB.

Jakie LLM uruchomię na 11 GB?

Wśród najlepszych, które się mieszczą: Ministral 3 14B, Mellum2.1 12B Thinking, Gemma 4 12B (Unified), Mistral NeMo 12B, Bielik PL 11B v3.0 Instruct.

Więcej o tej karcie

Narzędzia

Poradniki