BBrainOutput
NVIDIA·GPU

NVIDIA RTX 3060 12GB: especificaciones y compatibilidad con IA local

La puerta de entrada económica a la IA local: sus 12GB ejecutan modelos de 7-8B a 4 bits.

Especificaciones

Memoria
12 GB
Tipo de memoria
GDDR6
Ancho de banda
360 GB/s
FP16 aprox.
25 TFLOPS
Arquitectura
Ampere
Proceso
Samsung 8nm
Consumo
170 W
Lanzamiento
2021

Modelos que este chip puede ejecutar

Modelos abiertos evaluados para un solo NVIDIA RTX 3060 12GB, primero el de mejor ajuste.

  • CodeLlama 13B
    CodeLlama · ~13B · 16K ctx · Llama Community License

    Cabe en Q4_K_M (~8GB) con ~2.6GB de margen — alrededor de 1 instancia simultánea.

    Q4_K_M · ~8GBFunciona bien
  • Gemma 3 12B
    Gemma 3 · ~12B · 128K ctx · Gemma Terms of Use

    Cabe en Q4_K_M (~8GB) con ~2.6GB de margen — alrededor de 1 instancia simultánea.

    Q4_K_M · ~8GBFunciona bien
  • Mistral Nemo 12B
    Mistral · ~12B · 128K ctx · Apache-2.0

    Cabe en Q4_K_M (~8GB) con ~2.6GB de margen — alrededor de 1 instancia simultánea.

    Q4_K_M · ~8GBFunciona bien
  • Gemma 2 9B
    Gemma · ~9B · 8K ctx · Gemma Terms of Use

    Cabe en Q8_0 (~10GB) con ~0.6GB de margen — alrededor de 1 instancia simultánea.

    Q8_0 · ~10GBFunciona bien
  • Llama 3.1 8B
    Llama · ~8B · 128K ctx · Llama Community License

    Cabe en Q8_0 (~9GB) con ~1.6GB de margen — alrededor de 1 instancia simultánea.

    Q8_0 · ~9GBFunciona bien
  • Qwen3 8B
    Qwen · ~8B · 128K ctx · Apache-2.0

    Cabe en Q8_0 (~9GB) con ~1.6GB de margen — alrededor de 1 instancia simultánea.

    Q8_0 · ~9GBFunciona bien
  • Granite 3 8B
    Granite · ~8B · 128K ctx · Apache-2.0

    Cabe en Q8_0 (~9GB) con ~1.6GB de margen — alrededor de 1 instancia simultánea.

    Q8_0 · ~9GBFunciona bien
  • DeepSeek-R1 Distill 8B
    DeepSeek · ~8B · 128K ctx · MIT

    Cabe en Q8_0 (~9GB) con ~1.6GB de margen — alrededor de 1 instancia simultánea.

    Q8_0 · ~9GBFunciona bien

Dispositivos basados en este chip

BrainOutput Reference
BrainOutput Office Appliance (RTX 3060 12GB)
4 configuraciones

Crea un AI Business OS privado sobre NVIDIA RTX 3060 12GB

Run your own AI agents on hardware you control — private by design, no per-seat data leaving your premises. BrainOutput helps you pick the right machine and turn it into a working AI Business OS.

Explorar el AI Business OS