NVIDIADesktopowe GPUAktualna generacja

NVIDIA GeForce RTX 3090 do lokalnych LLM

Name: LLM Configurator — GPU VRAM Checker
Author: LLM Configurator

Autor: Jakub Rusinowski · Ostatnia aktualizacja: 12 lipca 2026

Z 24 GB przy 936 GB/s RTX 3090 uruchamia 118 modeli z katalogu przy Q4_K_M i kontekście 8K. Największy, który się mieści, to Qwen 3 32B (~22.8 GB), a najlepszy wybór to Laguna XS 2.1 33B-A3B przy 80–154 tok/s.

Nadal doskonały do AI. 24 GB VRAM na równi z RTX 4090 pod względem kompatybilności z modelami. Dostępny używany za 400–600 USD. Nieco wolniejszy, ale fantastyczny stosunek wartości do ceny.

Sprawdź mój sprzęt →Pełna tabela benchmarków

Modele, które działają na RTX 3090

Q4_K_M, kontekst 8K, 24 GB do wykorzystania. Uszeregowane według jakości i szybkości.

Model	VRAM	Szybkość	Zmieści się?
Laguna XS 2.1 33B-A3B Poolside Laguna XS 2.1	20.7 GB	80–154 tok/s	Mieści się
Granite 4.0 Small-H 32B-A9B IBM Granite 4.0	20.1 GB	46–89 tok/s	Mieści się
Olmo 3 32B Olmo 3	20.1 GB	18–34 tok/s	Mieści się
Nemotron-Cascade 2 30B-A3B Nemotron Cascade 2	19.9 GB	76–146 tok/s	Mieści się
Gemma 4 31B Gemma 4	19.5 GB	18–35 tok/s	Mieści się
Qwen 3 30B-A3B (MoE) Qwen 3	20 GB	97–187 tok/s	Mieści się
Qwen3-Coder 30B-A3B (MoE) Qwen3-Coder	20 GB	97–187 tok/s	Mieści się
GLM-4.7-Flash 30B-A3B GLM-4.7 / GLM-Z1	18.9 GB	81–156 tok/s	Mieści się
Granite 4.1 30B IBM Granite 4.1	18.9 GB	19–36 tok/s	Mieści się
Nemotron 3 Nano Omni 30B-A3B Nemotron 3 Nano Omni	18.9 GB	81–156 tok/s	Mieści się
North Mini Code 1.0 30B-A3B North Mini Code	18.9 GB	81–156 tok/s	Mieści się
Granite 4.2 30B IBM Granite 4.2	18.9 GB	19–36 tok/s	Mieści się

Pokazano 12 z 118

Kup kartę lub wynajmij tyle samo pamięci

Kup kartę albo wynajmij na godziny GPU z taką samą pamięcią, by najpierw wypróbować modele.

Kup ten sprzęt NVIDIA GeForce RTX 3090 24GB — 24 GB VRAM · 350 W board power Uruchom w chmurze RTX 3090 w RunPod — od $0.46/godz. · stawka sprawdzona 2026-08

lub porównaj w Vast.ai

Jako partner Amazon zarabiamy na kwalifikujących się zakupach. Linki do chmurowych GPU są linkami polecającymi — możemy otrzymać prowizję bez dodatkowych kosztów dla Ciebie.

Ujawnienie afiliacyjne: Niektóre odnośniki na tej stronie to linki afiliacyjne — jeśli dokonasz zakupu za ich pośrednictwem, LLM Configurator może otrzymać prowizję bez dodatkowych kosztów dla Ciebie. Jako uczestnik programu Amazon Associates, LLM Configurator zarabia na kwalifikujących się zakupach.

NVIDIA GeForce RTX 3090 24GB

24 GB VRAM · 350 W board power

Ceny w 2026 są niestabilne — sprawdź aktualną ofertę.

Sprawdź cenę na Amazon

Szybkość na tle innych GPU

Llama 3.1 8B, Q4_K_M. Szacowane zakresy. Jak to liczymy

H100 80GB (SXM)157–327 tok/s H100 80GB (PCIe)120–250 tok/s RTX 5090113–234 tok/s RTX PRO 6000 Blackwell113–234 tok/s RTX PRO 6000 Blackwell (Max-Q Edition)113–234 tok/s A100 80GB (PCIe)102–196 tok/s RTX PRO 5000 Blackwell (48 GB)94–194 tok/s RTX PRO 5000 Blackwell (72 GB)94–194 tok/s RTX 309060–115 tok/s

Specyfikacja

Specyfikację zaktualizowano 2026-07-12.

Pamięć: 24 GB
Przepustowość pamięci: 936 GB/s
Architektura: Ampere GA102
Seria: RTX 30-series
Pobór mocy: 350 W
Rok premiery: 2020
Cena premierowa: $1,499
Dostępne dla modeli: 24 GB

Najlepsze do32B models70B with offloadvalue 24GB

Polecany pierwszy model (Ollama)

Podobne GPU

AMD Radeon RX 7900 XTX24 GB · 960 GB/sTyle samo VRAM, +3% przepustowości · $999 NVIDIA GeForce RTX 5090 Laptop GPU24 GB · 896 GB/sTyle samo VRAM, −4% przepustowości NVIDIA RTX PRO 5000 Blackwell Laptop GPU24 GB · 896 GB/sTyle samo VRAM, −4% przepustowości

Najczęstsze pytania

Czy NVIDIA GeForce RTX 3090 uruchomi lokalne LLM?

Tak. Z 24 GB (24 GB dostępne dla modelu) uruchamia 118 modeli z katalogu przy Q4_K_M i kontekście 8K; największy to Qwen 3 32B, potrzebuje około 22.8 GB.

Jak szybki jest NVIDIA GeForce RTX 3090 w inferencji AI?

Szacujemy, że uruchamia Llama 3.1 8B z szybkością 60–115 tok/s przy Q4_K_M. Llama 3.3 70B się nie mieści: potrzebuje około 44 GB, a dostępne jest 24 GB. To szacunki z modelu przepustowości pamięci, nie pomiary; wzór jest na stronie metodologii.

Jakie LLM uruchomię na 24 GB?

Wśród najlepszych, które się mieszczą: Laguna XS 2.1 33B-A3B, Granite 4.0 Small-H 32B-A9B, Olmo 3 32B, Nemotron-Cascade 2 30B-A3B, Gemma 4 31B. Najszybszy start to Ollama: ollama run deepseek-r1:32b.

Czy uruchomię to na RTX 3090?

Więcej o tej karcie

Narzędzia

Poradniki