AMD Instinct MI300X 192GB: Spezifikationen & Eignung für lokale KI
Klassenführende 192GB HBM3 — große Modelle auf einem einzigen Beschleuniger.
Spezifikationen
- Speicher
- 192 GB
- Speichertyp
- HBM3
- Bandbreite
- 5,300 GB/s
- FP16 ca.
- zu prüfen
- Architektur
- CDNA 3
- Fertigung
- TSMC 5nm/6nm
- Leistung
- 750 W
- Markteinführung
- 2023
Modelle, die dieser Chip ausführen kann
Offene Modelle, bewertet für einen einzelnen AMD Instinct MI300X 192GB, beste Eignung zuerst.
- Qwen3 235B-A22B (MoE)Qwen · ~235B · 128K ctx · Apache-2.0
Passt mit Q4_K_M (~130GB) bei ~39GB Reserve — etwa 1 gleichzeitige Instanz.
Q4_K_M · ~130GBLäuft gut - Qwen2.5 72BQwen · ~72B · 128K ctx · Qwen License
Passt mit FP16 (~145GB) bei ~24GB Reserve — etwa 1 gleichzeitige Instanz.
FP16 · ~145GBLäuft gut - Llama 3.1 70BLlama · ~70B · 128K ctx · Llama Community License
Passt mit FP16 (~140GB) bei ~29GB Reserve — etwa 1 gleichzeitige Instanz.
FP16 · ~140GBLäuft gut - Llama 3.3 70BLlama · ~70B · 128K ctx · Llama Community License
Passt mit FP16 (~140GB) bei ~29GB Reserve — etwa 1 gleichzeitige Instanz.
FP16 · ~140GBLäuft gut - DeepSeek-R1 Distill Llama 70BDeepSeek · ~70B · 128K ctx · MIT
Passt mit FP16 (~140GB) bei ~29GB Reserve — etwa 1 gleichzeitige Instanz.
FP16 · ~140GBLäuft gut - Mixtral 8x7B (MoE)Mistral · ~47B · 32K ctx · Apache-2.0
Passt mit FP16 (~90GB) bei ~79GB Reserve — etwa 1 gleichzeitige Instanz.
FP16 · ~90GBLäuft gut - CodeLlama 34BCodeLlama · ~34B · 16K ctx · Llama Community License
Passt mit FP16 (~68GB) bei ~101GB Reserve — etwa 2 gleichzeitige Instanzen.
FP16 · ~68GBLäuft gut - Qwen2.5 32BQwen · ~32B · 128K ctx · Apache-2.0
Passt mit FP16 (~64GB) bei ~105GB Reserve — etwa 2 gleichzeitige Instanzen.
FP16 · ~64GBLäuft gut
Geräte auf Basis dieses Chips
Bauen Sie ein privates AI Business OS auf AMD Instinct MI300X 192GB
Run your own AI agents on hardware you control — private by design, no per-seat data leaving your premises. BrainOutput helps you pick the right machine and turn it into a working AI Business OS.