01Was es kann
- Permissive MIT-Lizenz
- Intelligence Index 34 (unter den besten offenen Modellen ohne Reasoning)
- 256k ctx lang
- Effiziente hybride Attention
- Ausgereifte agentische Fähigkeiten und Tool-Calling
- —Rechenzentrumshardware erforderlich (~600 GB VRAM bei Q4)
- —Kein Ollama-Tag (nur HF-Gewichte)
- —Kein Modell für Reasoning
05Installieren
Installieren Sie Ollama für Ihr Betriebssystem. Prüfen Sie das Modell und seine Quantisierung vor dem Download. Beginnen Sie mit einem Kontext von 4096 Tokens und prüfen Sie anschließend mit ollama ps, wo das Modell ausgeführt wird. Ein unten aufgeführter Befehl ist kein Beweis dafür, dass ein Test auf Ihrem Computer ausgeführt wurde.
02Benötigter Speicher
Ungefähr benötigter GPU-VRAM zum Ausführen dieses Modells, einschließlich des Speicherbedarfs für einen Kontext von 4k Tokens. Für einen längeren Kontext rechnen Sie mit zusätzlich ca. 1 GB je 8k Tokens.
Welche Hardware eignet sich für Ling 2.6 1T?
Um Ling 2.6 1T lokal mit Q4-Quantisierung auszuführen, benötigen Sie etwa 580 GB VRAM. Eine Option zum Vergleich: GMKtec EVO-X2 64 GB / 1 TB (Ryzen AI Max+ 395) — dieses Modell überschreitet die GPU-Kapazität dieses Mini-PCs: Wählen Sie ein kleineres Modell oder eine geeignete Infrastruktur.
Warum diese Wahl? Unsere vollständige Übersicht zu GMKtec EVO-X2 64 GB / 1 TB (Ryzen AI Max+ 395) →
Affiliate-Links – mögliche Provision ohne Mehrkosten für Sie, unabhängige Empfehlung. Als Amazon-Partner verdient QuelLLM an qualifizierten Käufen.
Zu groß für Ihren Rechner? Das Kit liefert Ihnen das Modell, das in Ihren VRAM passt
- Lebenslanger Online-Zugang
- PDF + Dateien
- Erstattung binnen 30 Tagen
03Erwartete Geschwindigkeit
Generierte Tokens pro Sekunde in Q4_K_M, Kontext 4k. Jenseits von 20 t/s, lässt es sich angenehm lesen. Bei weniger als 10 t/s, eignet es sich nur zum Testen.
04Öffentliche Benchmarks
Aus Model Cards oder MMLU-Pro-/Community-Quellen übernommene Ergebnisse. Einheit: Anteil korrekter Antworten in %.