NVIDIA16B~10 GB VRAM przy BF16

Cosmos 3 Nano — VRAM, szybkość i lokalna konfiguracja

Name: LLM Configurator — GPU VRAM Checker
Author: LLM Configurator

Autor: Jakub Rusinowski · Ostatnia aktualizacja: 21 lipca 2026

The mid-tier workhorse — a 16B-parameter two-tower MoT on a dense 8B backbone, tuned for high-quality video and action reasoning in a fraction of a second. Nano is the balance point: much cheaper to serve than Super while still leading open models (NVIDIA reports it matches the second-best result on R-Bench). Weights are ~32 GB at BF16, but NVIDIA recommends an RTX PRO 6000 / 96 GB-class GPU for full-context BF16 inference because video generation activations are memory-hungry. Omnimodal I/O (text, image, video, audio, action). OpenMDW-1.1. Specs from launch coverage and the Hugging Face model card — verify before relying on them.

Cosmos 3 Nano potrzebuje około 10 GB VRAM przy BF16 — skwantyzowane wagi plus narzut frameworka, bez pamięci podręcznej KV. Na Apple Silicon ta wartość pochodzi z pamięci zunifikowanej.

Logika85

Kreatywność88

Kod32

VRAM i szybkość według kwantyzacji

Liczone dla NVIDIA RTX 4090 (24 GB). Tylko wagi i narzut: architektura tego modelu nie jest opublikowana, więc nie doliczamy pamięci KV.

Kwant.	VRAM	Szybkość (szac.)	Dopasowanie
Q2_K 2.63 bpw	6.1 GB	~150 tok/s	Mieści się
Q3_K_M 3.41 bpw	7.6 GB	~130 tok/s	Mieści się
Q4_K_M 4.83 bpw	10.5 GB	~104 tok/s	Mieści się
Q5_K_M 5.67 bpw	12.1 GB	~93 tok/s	Mieści się
Q6_K 6.56 bpw	13.9 GB	~84 tok/s	Mieści się
Q8_0 8.50 bpw	17.8 GB	~69 tok/s	Mieści się
F16 16.00 bpw	32.8 GB	~6 tok/s	Częściowo w RAM

Czarny znacznik = dostępna pamięć na NVIDIA RTX 4090 (24 GB). Szacunki z modelu przepustowości pamięci opisanego na stronie metodologii. Kalkulator VRAM dla Cosmos 3 Nano →

Uruchom Cosmos 3 Nano

Najtańsze GPU z naszego katalogu, które uruchomi Cosmos 3 Nano, to Intel Arc B580 (12 GB).

Kup ten sprzęt Intel Arc B580 12GB — 12 GB VRAM · 190 W board power Uruchom w chmurze RTX 4090 w RunPod — od $0.34/godz. · stawka sprawdzona 2026-07

lub porównaj w Vast.ai od $0.35/godz. (typical low · varies)

Jako partner Amazon zarabiamy na kwalifikujących się zakupach. Linki do chmurowych GPU są linkami polecającymi — możemy otrzymać prowizję bez dodatkowych kosztów dla Ciebie.

Ujawnienie afiliacyjne: Niektóre odnośniki na tej stronie to linki afiliacyjne — jeśli dokonasz zakupu za ich pośrednictwem, LLM Configurator może otrzymać prowizję bez dodatkowych kosztów dla Ciebie. Jako uczestnik programu Amazon Associates, LLM Configurator zarabia na kwalifikujących się zakupach.

Intel Arc B580 12GB

12 GB VRAM · 190 W board power

Ceny w 2026 są niestabilne — sprawdź aktualną ofertę.

Sprawdź cenę na Amazon

Jak uruchomić Cosmos 3 Nano

Zainstaluj Ollama, a potem uruchom:

$ollama run cosmos-3

Wagi na Hugging Face: nvidia/Cosmos3-Nano ↗

Specyfikacja

Preview — The model is released, but these specs are thin or rest on a single source. Individual fields may be wrong.

Parametry: 16B total (8B dense transformer backbone)
Okno kontekstu: Omnimodal I/O (video/action)
Architektura: Two-tower Mixture-of-Transformers — autoregressive reasoner (VLM) + diffusion generator, shared multimodal attention
Dostawca: NVIDIA
Licencja: OpenMDW-1.1
Practical deployment: Laptop
Określono przy: BF16
RAM systemowy: 96 GB
Rekord zaktualizowany: 2026-07-21

LicencjaOpenMDW-1.1Użycie komercyjne dozwolone

Commercial use permitted. No usage restrictions beyond attribution.

Jakość i zastosowania

Wyniki opublikowane przez autorów modelu lub niezależnego oceniającego — jakość, nie przepustowość, i nie mierzone przez nas.

Najlepszy doroboticsworld simulationvideo generationaction reasoningsynthetic data

Benchmark	Wynik	Źródło
R-Bench (Image-to-Video, open-source)	2 / 2 2nd best (rank)	deklaracja producenta · NVIDIA Cosmos 3 (launch)

Czy uruchomię Cosmos 3 Nano na moim GPU?

Inne rozmiary Cosmos 3

Cosmos 3 Nano — najczęściej zadawane pytania

How much VRAM does Cosmos 3 Nano need?

About 10 GB at BF16 — quantized weights plus framework overhead, before any KV cache. The cache grows with context length and is added on top; the table above folds it in. Apple Silicon counts unified memory toward the same figure.

Does Cosmos 3 Nano run on an RTX 4090 (24 GB)?

Yes. Cosmos 3 Nano needs about 10 GB at BF16, inside a 24 GB card, at an estimated 104 tokens/sec.

How do I run Cosmos 3 Nano locally?

Install Ollama and run `ollama run cosmos-3`. That pulls the weights and starts a local OpenAI-compatible endpoint; after the download nothing leaves the machine.

What other sizes does Cosmos 3 come in?

Cosmos 3 Super (39 GB), Cosmos 3 Nano (10 GB), Cosmos 3 Edge (3 GB). Every size shares the family's training and licence; the larger ones score higher and need proportionally more memory.