Poolside33B (3B active)~21 GB VRAM przy Q4_K_M

Laguna XS 2.1 33B-A3B — VRAM, szybkość i lokalna konfiguracja

Autor: Jakub Rusinowski · Ostatnia aktualizacja:

33B total parameters with only 3B activated per token, which is what lets a model scoring 70.9% on SWE-Bench Verified sit on a single 24GB card. Mixed sliding-window + global attention (3:1 across 40 layers), sigmoid per-head gating, FP8 KV cache, 256K context. Released under OpenMDW-1.1 — the Linux Foundation / NVIDIA permissive model-weights framework — not Apache 2.0, so check the terms if you are redistributing.

Laguna XS 2.1 33B-A3B potrzebuje około 21 GB VRAM przy Q4_K_M — skwantyzowane wagi plus narzut frameworka, bez pamięci podręcznej KV. Na Apple Silicon ta wartość pochodzi z pamięci zunifikowanej.

Logika82
Kreatywność62
Kod94

VRAM i szybkość według kwantyzacji

Liczone dla NVIDIA RTX 4090 (24 GB). Tylko wagi i narzut: architektura tego modelu nie jest opublikowana, więc nie doliczamy pamięci KV.

Kwant.VRAMSzybkość (szac.)Dopasowanie
Q2_K
2.63 bpw
11.6 GB~210 tok/sMieści się
Q3_K_M
3.41 bpw
14.9 GB~194 tok/sMieści się
Q4_K_M
4.83 bpw
20.7 GB~171 tok/sMieści się
Q5_K_M
5.67 bpw
24.2 GB~24 tok/sCzęściowo w RAM
Q6_K
6.56 bpw
27.9 GB~22 tok/sCzęściowo w RAM
Q8_0
8.50 bpw
35.9 GB~20 tok/sCzęściowo w RAM
F16
16.00 bpw
66.8 GB—Za duży

Czarny znacznik = dostępna pamięć na NVIDIA RTX 4090 (24 GB). Szacunki z modelu przepustowości pamięci opisanego na stronie metodologii. Kalkulator VRAM dla Laguna XS 2.1 33B-A3B →

Uruchom Laguna XS 2.1 33B-A3B

Najtańsze GPU z naszego katalogu, które uruchomi Laguna XS 2.1 33B-A3B, to AMD Radeon RX 7900 XTX (24 GB).

Kup ten sprzęt AMD Radeon RX 7900 XTX 24GB — 24 GB VRAM · 355 W board powerUruchom w chmurze RTX 4090 w RunPod — od $0.34/godz. · stawka sprawdzona 2026-07

lub porównaj w Vast.ai od $0.35/godz. (typical low · varies)

Jako partner Amazon zarabiamy na kwalifikujących się zakupach. Linki do chmurowych GPU są linkami polecającymi — możemy otrzymać prowizję bez dodatkowych kosztów dla Ciebie.

Ujawnienie afiliacyjne: Niektóre odnośniki na tej stronie to linki afiliacyjne — jeśli dokonasz zakupu za ich pośrednictwem, LLM Configurator może otrzymać prowizję bez dodatkowych kosztów dla Ciebie. Jako uczestnik programu Amazon Associates, LLM Configurator zarabia na kwalifikujących się zakupach.
AMD Radeon RX 7900 XTX 24GB
24 GB VRAM · 355 W board power
Ceny w 2026 są niestabilne — sprawdź aktualną ofertę.

Jak uruchomić Laguna XS 2.1 33B-A3B

Zainstaluj Ollama, a potem uruchom:

ollama run poolside-laguna
Wagi na Hugging Face: poolside/Laguna-XS-2.1 ↗

Specyfikacja

Preview — The model is released, but these specs are thin or rest on a single source. Individual fields may be wrong.

Preview — The model is released, but these specs are thin or rest on a single source. Individual fields may be wrong.

Parametry
33 Billion (3B active)
Okno kontekstu
262,144
Architektura
Mixture-of-Experts (sliding-window + global attention, FP8 KV cache)
Dostawca
Poolside
Licencja
OpenMDW-1.1
Practical deployment
Single consumer GPU
Określono przy
Q4_K_M
RAM systemowy
32 GB
Rekord zaktualizowany
2026-08-15
LicencjaOpenMDW-1.1Użycie komercyjne dozwolone

Commercial use permitted. No usage restrictions beyond attribution.

Jakość i zastosowania

Wyniki opublikowane przez autorów modelu lub niezależnego oceniającego — jakość, nie przepustowość, i nie mierzone przez nas.

Najlepszy doagentic codingsoftware engineeringrepo levelconsumer gpulong documents
BenchmarkWynikŹródło
SWE-Bench Verified70.9 / 100 %opublikowane · https://poolside.ai/blog/introducing-laguna-xs-2-1
SWE-bench Multilingual63.1 / 100 %opublikowane · https://poolside.ai/blog/introducing-laguna-xs-2-1

Czy uruchomię Laguna XS 2.1 33B-A3B na moim GPU?

Laguna XS 2.1 33B-A3B — najczęściej zadawane pytania

How much VRAM does Laguna XS 2.1 33B-A3B need?

About 21 GB at Q4_K_M — quantized weights plus framework overhead, before any KV cache. The cache grows with context length and is added on top; the table above folds it in. Apple Silicon counts unified memory toward the same figure.

Does Laguna XS 2.1 33B-A3B run on an RTX 4090 (24 GB)?

Yes. Laguna XS 2.1 33B-A3B needs about 21 GB at Q4_K_M, inside a 24 GB card, at an estimated 171 tokens/sec.

How do I run Laguna XS 2.1 33B-A3B locally?

Install Ollama and run `ollama run poolside-laguna`. That pulls the weights and starts a local OpenAI-compatible endpoint; after the download nothing leaves the machine.