NVIDIA RTX 3060 12GB : spécifications et compatibilité IA locale
La porte d'entrée économique vers l'IA locale : ses 12GB font tourner des modèles de 7-8B en 4 bits.
Spécifications
- Mémoire
- 12 GB
- Type de mémoire
- GDDR6
- Bande passante
- 360 GB/s
- FP16 approx.
- 25 TFLOPS
- Architecture
- Ampere
- Gravure
- Samsung 8nm
- Consommation
- 170 W
- Sortie
- 2021
Modèles que cette puce peut exécuter
Modèles ouverts évalués pour une seule NVIDIA RTX 3060 12GB, du meilleur ajustement d'abord.
- CodeLlama 13BCodeLlama · ~13B · 16K ctx · Llama Community License
Tient en Q4_K_M (~8GB) avec ~2.6GB de marge — environ 1 instance simultanée.
Q4_K_M · ~8GBFonctionne bien - Gemma 3 12BGemma 3 · ~12B · 128K ctx · Gemma Terms of Use
Tient en Q4_K_M (~8GB) avec ~2.6GB de marge — environ 1 instance simultanée.
Q4_K_M · ~8GBFonctionne bien - Mistral Nemo 12BMistral · ~12B · 128K ctx · Apache-2.0
Tient en Q4_K_M (~8GB) avec ~2.6GB de marge — environ 1 instance simultanée.
Q4_K_M · ~8GBFonctionne bien - Gemma 2 9BGemma · ~9B · 8K ctx · Gemma Terms of Use
Tient en Q8_0 (~10GB) avec ~0.6GB de marge — environ 1 instance simultanée.
Q8_0 · ~10GBFonctionne bien - Llama 3.1 8BLlama · ~8B · 128K ctx · Llama Community License
Tient en Q8_0 (~9GB) avec ~1.6GB de marge — environ 1 instance simultanée.
Q8_0 · ~9GBFonctionne bien - Qwen3 8BQwen · ~8B · 128K ctx · Apache-2.0
Tient en Q8_0 (~9GB) avec ~1.6GB de marge — environ 1 instance simultanée.
Q8_0 · ~9GBFonctionne bien - Granite 3 8BGranite · ~8B · 128K ctx · Apache-2.0
Tient en Q8_0 (~9GB) avec ~1.6GB de marge — environ 1 instance simultanée.
Q8_0 · ~9GBFonctionne bien - DeepSeek-R1 Distill 8BDeepSeek · ~8B · 128K ctx · MIT
Tient en Q8_0 (~9GB) avec ~1.6GB de marge — environ 1 instance simultanée.
Q8_0 · ~9GBFonctionne bien
Appareils basés sur cette puce
Construisez un AI Business OS privé sur NVIDIA RTX 3060 12GB
Run your own AI agents on hardware you control — private by design, no per-seat data leaving your premises. BrainOutput helps you pick the right machine and turn it into a working AI Business OS.