Familie DeepSeek · 32Mrd. Parameter

DeepSeek R2 32B

Dichtes Reasoning-Modell mit 32B Parametern unter MIT-Lizenz. AIME: 92,7 %. Passt in Q4 in den Speicher einer RTX 4090.

🇨🇳 DeepSeek·Lizenz MIT·Kontext 125k tokens·Erscheinungsdatum —·Passt in die 128 GB von GIGABYTE AI TOP ATOM (Affiliate-Link)← Katalog

01Was es kann

Stärken
  • Geeignet für: Workstation-Reasoning
  • Geeignet für: Fortgeschrittene Mathematik
  • Geeignet für: Wissenschaften
Einschränkungen, die Sie kennen sollten
  • —Offizielle Modelcard für Details ansehen
Architektur
Transformer-Architektur
Training
Trainingsdetails nicht öffentlich.
Ideal für
Workstation-ReasoningFortgeschrittene MathematikWissenschaften

04Installieren

Installieren Sie Ollama für Ihr Betriebssystem. Prüfen Sie das Modell und seine Quantisierung vor dem Download. Beginnen Sie mit einem Kontext von 4096 Tokens und prüfen Sie anschließend mit ollama ps, wo das Modell ausgeführt wird. Ein unten aufgeführter Befehl ist kein Beweis dafür, dass ein Test auf Ihrem Computer ausgeführt wurde.

$ollama run deepseek-r2-32b
⚠
Erster Download: zwischen 2 und 40 GB, abhängig von der gewählten Quantisierung. Festplattenspeicher einplanen, stabile Verbindung empfohlen. Nachfolgende Starts erfolgen sofort.

02Benötigter Speicher

Ungefähr benötigter GPU-VRAM zum Ausführen dieses Modells, einschließlich des Speicherbedarfs für einen Kontext von 4k Tokens. Für einen längeren Kontext rechnen Sie mit zusätzlich ca. 1 GB je 8k Tokens.

Q4_K_M
Am leichtesten, ~5 % Verlust
19 GB
Q5_K_M
Guter Kompromiss aus Qualität und Größe
23 GB
Q8_0
Kaum von FP16 zu unterscheiden
35 GB
FP16
Volle Präzision — Server-Einsatz
64 GB
CPU-Fallback · Wenn Sie keine GPU haben, rechnen Sie mit 32 GB RAM als Minimum, um dieses Modell mit reduzierter Geschwindigkeit auszuführen.

Welche Hardware eignet sich für DeepSeek R2 32B?

Um DeepSeek R2 32B lokal mit Q4-Quantisierung auszuführen, benötigen Sie etwa 19 GB VRAM. Eine Option zum Vergleich: GMKtec EVO-X2 64 GB / 1 TB (Ryzen AI Max+ 395) — Halten Sie einen Puffer für das System und den Kontext frei; prüfen Sie die Kompatibilität der Engine mit der GPU.

Aktuelles Angebot: GMKtec EVO-X2 64 GB / 1 TB (Ryzen AI Max+ 395)
AmazonPreis ansehen →

Warum diese Wahl? Unsere vollständige Übersicht zu GMKtec EVO-X2 64 GB / 1 TB (Ryzen AI Max+ 395) →

Affiliate-Links — mögliche Provision ohne zusätzliche Kosten für Sie, unabhängige Empfehlung. Als Amazon-Partner verdient WelchesLLM an qualifizierten Käufen.

Unterwegs: DeepSeek R2 32B läuft auch auf einem RTX-Laptop (24 GB VRAM) →

Dieses Modell in Ihrem privaten ChatGPT, ohne Cloud

Ihr privates, kostenloses ChatGPT auf Ihrem Rechner in einer Stunde – mit LM Studio, Ollama, Open WebUI und Ihren Dokumenten, ganz ohne Cloud.

  • Lebenslanger Online-Zugang
  • PDF + Dateien
  • Lebenslange Updates

03Erwartete Geschwindigkeit

Generierte Tokens pro Sekunde in Q4_K_M, Kontext 4k. Jenseits von 20 t/s, lässt es sich angenehm lesen. Bei weniger als 10 t/s, eignet es sich nur zum Testen.

Einsteigerklasse
~3t/s
GTX 1650, RX 6600, MBA M2 8GB
Mittelklasse
~12t/s
RTX 4060, 4070, MBP M3 Pro
Oberklasse
~30t/s
RTX 4090, M4 Max, Radeon 7900