NVIDIA RTX 3060 12GB: especificações e compatibilidade com IA local
A porta de entrada económica para a IA local: os seus 12GB executam modelos de 7-8B em 4 bits.
Especificações
- Memória
- 12 GB
- Tipo de memória
- GDDR6
- Largura de banda
- 360 GB/s
- FP16 aprox.
- 25 TFLOPS
- Arquitetura
- Ampere
- Processo
- Samsung 8nm
- Consumo
- 170 W
- Lançamento
- 2021
Modelos que este chip pode executar
Modelos abertos avaliados para um único NVIDIA RTX 3060 12GB, o de melhor ajuste primeiro.
- CodeLlama 13BCodeLlama · ~13B · 16K ctx · Llama Community License
Cabe em Q4_K_M (~8GB) com ~2.6GB de margem — cerca de 1 instância em simultâneo.
Q4_K_M · ~8GBCorre bem - Gemma 3 12BGemma 3 · ~12B · 128K ctx · Gemma Terms of Use
Cabe em Q4_K_M (~8GB) com ~2.6GB de margem — cerca de 1 instância em simultâneo.
Q4_K_M · ~8GBCorre bem - Mistral Nemo 12BMistral · ~12B · 128K ctx · Apache-2.0
Cabe em Q4_K_M (~8GB) com ~2.6GB de margem — cerca de 1 instância em simultâneo.
Q4_K_M · ~8GBCorre bem - Gemma 2 9BGemma · ~9B · 8K ctx · Gemma Terms of Use
Cabe em Q8_0 (~10GB) com ~0.6GB de margem — cerca de 1 instância em simultâneo.
Q8_0 · ~10GBCorre bem - Llama 3.1 8BLlama · ~8B · 128K ctx · Llama Community License
Cabe em Q8_0 (~9GB) com ~1.6GB de margem — cerca de 1 instância em simultâneo.
Q8_0 · ~9GBCorre bem - Qwen3 8BQwen · ~8B · 128K ctx · Apache-2.0
Cabe em Q8_0 (~9GB) com ~1.6GB de margem — cerca de 1 instância em simultâneo.
Q8_0 · ~9GBCorre bem - Granite 3 8BGranite · ~8B · 128K ctx · Apache-2.0
Cabe em Q8_0 (~9GB) com ~1.6GB de margem — cerca de 1 instância em simultâneo.
Q8_0 · ~9GBCorre bem - DeepSeek-R1 Distill 8BDeepSeek · ~8B · 128K ctx · MIT
Cabe em Q8_0 (~9GB) com ~1.6GB de margem — cerca de 1 instância em simultâneo.
Q8_0 · ~9GBCorre bem
Dispositivos baseados neste chip
Construa um AI Business OS privado sobre NVIDIA RTX 3060 12GB
Run your own AI agents on hardware you control — private by design, no per-seat data leaving your premises. BrainOutput helps you pick the right machine and turn it into a working AI Business OS.