Dowody: wyniki benchmarków podane przez dostawcę
Step 3.7 Flash 198B-A11B — VRAM, szybkość i lokalna konfiguracja
Autor: Jakub Rusinowski · Ostatnia aktualizacja:
Model językowy MoE z 196B parametrów i enkoderem obrazu 1,8B (razem 198B), około 11B aktywnych na token: 288 ekspertów routowanych, z czego 8 aktywnych, plus współdzielony, 45 warstw, z których 12 ma pełną uwagę, a 33 okno 512 tokenów, kontekst 256K i trzy poziomy rozumowania. StepFun publikuje oficjalne pliki GGUF od 75,8 GB (IQ3_XXS) do 394 GB (BF16); oficjalnego Q4_K_M nie ma, więc wartość nagłówkowa dotyczy pliku Q4_K_S.
Step 3.7 Flash 198B-A11B potrzebuje około 112 GB VRAM przy Q4_K_S — skwantyzowane wagi plus narzut frameworka, bez pamięci podręcznej KV. Na Apple Silicon ta wartość pochodzi z pamięci zunifikowanej.
VRAM i szybkość według kwantyzacji
Liczone dla NVIDIA RTX 4090 (24 GB). Obejmuje pamięć podręczną KV przy kontekście 8K, więc wartości są wyższe niż główna liczba.
| Kwant. | Pamięć | VRAM | Szybkość (szac.) | Dopasowanie |
|---|---|---|---|---|
| IQ3_XXS 3.09 bpw | 77.1 GB | — | Za duży | |
| Q3_K_M 3.41 bpw | 95.1 GB | — | Za duży | |
| Q3_K_L 4.18 bpw | 103.8 GB | — | Za duży | |
| IQ4_XS 4.29 bpw | 106.3 GB | — | Za duży | |
| Q4_K_S 4.55 bpw | 112.8 GB | — | Za duży | |
| Q8_0 8.50 bpw | 210.8 GB | — | Za duży | |
| BF16 16.00 bpw | 395.4 GB | — | Za duży |
Czarny znacznik = dostępna pamięć na NVIDIA RTX 4090 (24 GB). Szacunki z modelu przepustowości pamięci opisanego na stronie metodologii. Kalkulator VRAM dla Step 3.7 Flash 198B-A11B →
Uruchom Step 3.7 Flash 198B-A11B
Najtańsze GPU z naszego katalogu, które uruchomi Step 3.7 Flash 198B-A11B, to NVIDIA DGX Spark (128 GB).
Jako partner Amazon zarabiamy na kwalifikujących się zakupach. Linki do chmurowych GPU są linkami polecającymi — możemy otrzymać prowizję bez dodatkowych kosztów dla Ciebie.
Jak uruchomić Step 3.7 Flash 198B-A11B
No Ollama tag. Use StepFun's official GGUFs with llama.cpp (mainline supports the Step 3.5 architecture the model uses; the card's build steps use StepFun's own fork), or vLLM / SGLang.
Specyfikacja
Verified — Checked against the primary source — the model card or the vendor spec page — and corroborated by a second independent source.
- Parametry
- 198 Billion (11B active)
- Okno kontekstu
- 262,144
- Architektura
- Mixture-of-Experts (288 routed + 1 shared, 8 active), GQA with 3:1 sliding-window to full attention
- Dostawca
- StepFun
- Licencja
- Apache-2.0
- Practical deployment
- Workstation (large unified memory or pro GPU)
- Określono przy
- Q4_K_S
- Vision projector
- +4 GB when you send images (not included above)
- RAM systemowy
- 128 GB
- Rekord zaktualizowany
- 2026-11-03
Commercial use permitted. No usage restrictions beyond attribution.
Ograniczenia i zastrzeżenia
- No official Q4_K_M build: the published 4-bit files are IQ4_XS (105.0 GB) and Q4_K_S (111.5 GB).
- StepFun recommends 128 GB of unified memory; at the default Apple Silicon GPU limit only the 3-bit files leave room for a cache.
- Benchmarks on the card are vendor-reported.
Jakość i zastosowania
Wyniki opublikowane przez autorów modelu lub niezależnego oceniającego — jakość, nie przepustowość, i nie mierzone przez nas.
Inne rozmiary StepFun Step
Step 3.7 Flash 198B-A11B — najczęściej zadawane pytania
How much VRAM does Step 3.7 Flash 198B-A11B need?
About 112 GB at Q4_K_S — quantized weights plus framework overhead, before any KV cache. The cache grows with context length and is added on top; the table above folds it in. Apple Silicon counts unified memory toward the same figure.
Does Step 3.7 Flash 198B-A11B run on an RTX 4090 (24 GB)?
No. Step 3.7 Flash 198B-A11B needs about 112 GB at Q4_K_S, more than a single RTX 4090's 24 GB. It needs a larger card, several GPUs, or Apple Silicon with enough unified memory — or it runs with part of the weights offloaded to system RAM, which is much slower.
How do I run Step 3.7 Flash 198B-A11B locally?
No Ollama tag. Use StepFun's official GGUFs with llama.cpp (mainline supports the Step 3.5 architecture the model uses; the card's build steps use StepFun's own fork), or vLLM / SGLang. Running the published tag would send your prompts to a hosted GPU rather than your own machine.
What other sizes does StepFun Step come in?
Step 3.7 Flash 198B-A11B (112 GB), Step 5 Preview 600B-A27B (366 GB). Every size shares the family's training and licence; the larger ones score higher and need proportionally more memory.