Osobne obliczenia składników pamięci, kontekstu i zapasu. Wystarczający budżet nie potwierdza obsługi backendu ani szybkości.
Obliczenia i import plików działają w przeglądarce. Narzędzia nie przesyłają danych wejściowych. Istniejący pomiar witryny obejmuje identyfikator narzędzia i etykiety przycisków.
Wartości domyślne stanowią przykładowe założenia. Wyniki służą planowaniu.
Import metadanych Ollama
Źródła i ograniczenia
Wagi = łączna liczba parametrów × efektywne bity / 8. Gęsta pamięć KV = warstwy × głowy KV × wymiar głowy × tokeny × sekwencje × (bajty K + bajty V). Rozmiar artefaktu nie gwarantuje zużycia podczas pracy. Kwantyzacja pamięci, sliding window oraz architektury hybrydowe i rekurencyjne wymagają odpowiednich modeli lub zmierzonego budżetu. Profile kart podają GB producenta; budżet GiB to edytowalne założenie do sprawdzenia w runtime. Pamięć wielu kart nie jest sumowana.
- Ollama metadata
- llama.cpp cache types
- NVIDIA RTX 5090
- NVIDIA: RTX 3060-Familie
- NVIDIA: RTX 5060-Familie
- NVIDIA: RTX 3090
- NVIDIA: RTX 5090 32 GB
- NVIDIA: RTX 6000 Ada 48 GB
- NVIDIA: RTX PRO 6000 Blackwell 96 GB
- NVIDIA: RTX 4090 24 GB
- Intel: Arc B580 12 GB / B570 10 GB
- Intel: Arc Pro B50 16 GB
- Intel: Arc Pro B60 und B50
- Intel: Einführung Arc Pro B65 / B70
- Intel: Arc Pro B70 – Datenblatt, 32 GB
- Intel: Arc Pro B65 32 GB – Datenblatt
- Intel: Arc Pro B60 24 GB
Dokumentacja sprawdzona: 05.10.2026. Profile sprzętu: specyfikacje producenta i edytowalne budżety pamięci.
Pytania i odpowiedzi
Jakie ograniczenia dotyczą wyniku?
Wagi = łączna liczba parametrów × efektywne bity / 8. Gęsta pamięć KV = warstwy × głowy KV × wymiar głowy × tokeny × sekwencje × (bajty K + bajty V). Rozmiar artefaktu nie gwarantuje zużycia podczas pracy. Kwantyzacja pamięci, sliding window oraz architektury hybrydowe i rekurencyjne wymagają odpowiednich modeli lub zmierzonego budżetu. Profile kart podają GB producenta; budżet GiB to edytowalne założenie do sprawdzenia w runtime. Pamięć wielu kart nie jest sumowana.
Jak przetwarzane są dane wejściowe?
Obliczenia i import plików działają w przeglądarce. Narzędzia nie przesyłają danych wejściowych. Istniejący pomiar witryny obejmuje identyfikator narzędzia i etykiety przycisków.