BBrainOutput
NVIDIA·GPU

NVIDIA RTX 3090: especificações e compatibilidade com IA local

24GB com desconto no mercado de usados — uma escolha de valor para modelos da classe 32B.

Especificações

Memória
24 GB
Tipo de memória
GDDR6X
Largura de banda
936 GB/s
FP16 aprox.
35 TFLOPS
Arquitetura
Ampere
Processo
Samsung 8nm
Consumo
350 W
Lançamento
2020

Modelos que este chip pode executar

Modelos abertos avaliados para um único NVIDIA RTX 3090, o de melhor ajuste primeiro.

  • Gemma 2 27B
    Gemma · ~27B · 8K ctx · Gemma Terms of Use

    Cabe em Q4_K_M (~17GB) com ~4.1GB de margem — cerca de 1 instância em simultâneo.

    Q4_K_M · ~17GBCorre bem
  • Gemma 3 27B
    Gemma 3 · ~27B · 128K ctx · Gemma Terms of Use

    Cabe em Q4_K_M (~17GB) com ~4.1GB de margem — cerca de 1 instância em simultâneo.

    Q4_K_M · ~17GBCorre bem
  • Mistral Small 24B
    Mistral · ~24B · 32K ctx · Apache-2.0

    Cabe em Q4_K_M (~14GB) com ~7.1GB de margem — cerca de 1 instância em simultâneo.

    Q4_K_M · ~14GBCorre bem
  • DeepSeek-Coder V2 (class)
    DeepSeek · ~16B · 128K ctx · DeepSeek License

    Cabe em Q8_0 (~18GB) com ~3.1GB de margem — cerca de 1 instância em simultâneo.

    Q8_0 · ~18GBCorre bem
  • StarCoder2 15B
    StarCoder · ~15B · 16K ctx · BigCode OpenRAIL-M

    Cabe em Q8_0 (~17GB) com ~4.1GB de margem — cerca de 1 instância em simultâneo.

    Q8_0 · ~17GBCorre bem
  • Qwen2.5 14B
    Qwen · ~14B · 128K ctx · Apache-2.0

    Cabe em Q8_0 (~16GB) com ~5.1GB de margem — cerca de 1 instância em simultâneo.

    Q8_0 · ~16GBCorre bem
  • Qwen3 14B
    Qwen · ~14B · 128K ctx · Apache-2.0

    Cabe em Q8_0 (~16GB) com ~5.1GB de margem — cerca de 1 instância em simultâneo.

    Q8_0 · ~16GBCorre bem
  • Phi-3 Medium (14B)
    Phi · ~14B · 128K ctx · MIT

    Cabe em Q8_0 (~15GB) com ~6.1GB de margem — cerca de 1 instância em simultâneo.

    Q8_0 · ~15GBCorre bem

Dispositivos baseados neste chip

Construa um AI Business OS privado sobre NVIDIA RTX 3090

Run your own AI agents on hardware you control — private by design, no per-seat data leaving your premises. BrainOutput helps you pick the right machine and turn it into a working AI Business OS.