BBrainOutput
NVIDIA·GPU

NVIDIA RTX 3060 12GB : spécifications et compatibilité IA locale

La porte d'entrée économique vers l'IA locale : ses 12GB font tourner des modèles de 7-8B en 4 bits.

Spécifications

Mémoire
12 GB
Type de mémoire
GDDR6
Bande passante
360 GB/s
FP16 approx.
25 TFLOPS
Architecture
Ampere
Gravure
Samsung 8nm
Consommation
170 W
Sortie
2021

Modèles que cette puce peut exécuter

Modèles ouverts évalués pour une seule NVIDIA RTX 3060 12GB, du meilleur ajustement d'abord.

  • CodeLlama 13B
    CodeLlama · ~13B · 16K ctx · Llama Community License

    Tient en Q4_K_M (~8GB) avec ~2.6GB de marge — environ 1 instance simultanée.

    Q4_K_M · ~8GBFonctionne bien
  • Gemma 3 12B
    Gemma 3 · ~12B · 128K ctx · Gemma Terms of Use

    Tient en Q4_K_M (~8GB) avec ~2.6GB de marge — environ 1 instance simultanée.

    Q4_K_M · ~8GBFonctionne bien
  • Mistral Nemo 12B
    Mistral · ~12B · 128K ctx · Apache-2.0

    Tient en Q4_K_M (~8GB) avec ~2.6GB de marge — environ 1 instance simultanée.

    Q4_K_M · ~8GBFonctionne bien
  • Gemma 2 9B
    Gemma · ~9B · 8K ctx · Gemma Terms of Use

    Tient en Q8_0 (~10GB) avec ~0.6GB de marge — environ 1 instance simultanée.

    Q8_0 · ~10GBFonctionne bien
  • Llama 3.1 8B
    Llama · ~8B · 128K ctx · Llama Community License

    Tient en Q8_0 (~9GB) avec ~1.6GB de marge — environ 1 instance simultanée.

    Q8_0 · ~9GBFonctionne bien
  • Qwen3 8B
    Qwen · ~8B · 128K ctx · Apache-2.0

    Tient en Q8_0 (~9GB) avec ~1.6GB de marge — environ 1 instance simultanée.

    Q8_0 · ~9GBFonctionne bien
  • Granite 3 8B
    Granite · ~8B · 128K ctx · Apache-2.0

    Tient en Q8_0 (~9GB) avec ~1.6GB de marge — environ 1 instance simultanée.

    Q8_0 · ~9GBFonctionne bien
  • DeepSeek-R1 Distill 8B
    DeepSeek · ~8B · 128K ctx · MIT

    Tient en Q8_0 (~9GB) avec ~1.6GB de marge — environ 1 instance simultanée.

    Q8_0 · ~9GBFonctionne bien

Appareils basés sur cette puce

Construisez un AI Business OS privé sur NVIDIA RTX 3060 12GB

Run your own AI agents on hardware you control — private by design, no per-seat data leaving your premises. BrainOutput helps you pick the right machine and turn it into a working AI Business OS.