BBrainOutput
AMD·Acelerador de centro de datosProvisional

AMD Instinct MI325X 256GB: especificaciones y compatibilidad con IA local

Acelerador de 256GB HBM3e: memoria muy grande para servir modelos grandes.

Algunos detalles aquí son provisional (placeholder). Considera las especificaciones como aproximadas y verifícalas con el fabricante antes de confiar en ellas o comprar.

Especificaciones

Memoria
256 GB
Tipo de memoria
HBM3e
Ancho de banda
6,000 GB/s
FP16 aprox.
por verificar
Arquitectura
CDNA 3
Proceso
TSMC
Consumo
1,000 W
Lanzamiento
2024

Modelos que este chip puede ejecutar

Modelos abiertos evaluados para un solo AMD Instinct MI325X 256GB, primero el de mejor ajuste.

  • Qwen3 235B-A22B (MoE)
    Qwen · ~235B · 128K ctx · Apache-2.0

    Cabe en Q4_K_M (~130GB) con ~95.3GB de margen — alrededor de 1 instancia simultánea.

    Q4_K_M · ~130GBFunciona bien
  • Qwen2.5 72B
    Qwen · ~72B · 128K ctx · Qwen License

    Cabe en FP16 (~145GB) con ~80.3GB de margen — alrededor de 1 instancia simultánea.

    FP16 · ~145GBFunciona bien
  • Llama 3.1 70B
    Llama · ~70B · 128K ctx · Llama Community License

    Cabe en FP16 (~140GB) con ~85.3GB de margen — alrededor de 1 instancia simultánea.

    FP16 · ~140GBFunciona bien
  • Llama 3.3 70B
    Llama · ~70B · 128K ctx · Llama Community License

    Cabe en FP16 (~140GB) con ~85.3GB de margen — alrededor de 1 instancia simultánea.

    FP16 · ~140GBFunciona bien
  • DeepSeek-R1 Distill Llama 70B
    DeepSeek · ~70B · 128K ctx · MIT

    Cabe en FP16 (~140GB) con ~85.3GB de margen — alrededor de 1 instancia simultánea.

    FP16 · ~140GBFunciona bien
  • Mixtral 8x7B (MoE)
    Mistral · ~47B · 32K ctx · Apache-2.0

    Cabe en FP16 (~90GB) con ~135.3GB de margen — alrededor de 2 instancias simultáneas.

    FP16 · ~90GBFunciona bien
  • CodeLlama 34B
    CodeLlama · ~34B · 16K ctx · Llama Community License

    Cabe en FP16 (~68GB) con ~157.3GB de margen — alrededor de 3 instancias simultáneas.

    FP16 · ~68GBFunciona bien
  • Qwen2.5 32B
    Qwen · ~32B · 128K ctx · Apache-2.0

    Cabe en FP16 (~64GB) con ~161.3GB de margen — alrededor de 3 instancias simultáneas.

    FP16 · ~64GBFunciona bien

Crea un AI Business OS privado sobre AMD Instinct MI325X 256GB

Run your own AI agents on hardware you control — private by design, no per-seat data leaving your premises. BrainOutput helps you pick the right machine and turn it into a working AI Business OS.

Explorar el AI Business OS