¿Puede AMD Radeon RX 7800 XT ejecutar Qwen3-8B?
Esta página fue escrita y traducida automáticamente por IA y verificada por software con respecto a sus fuentes, sin edición humana. Las especificaciones provienen de las fuentes indicadas; los requisitos de memoria y las velocidades son estimaciones calculadas con fórmulas publicadas. Cómo usamos la IA
Cabe Según la comprobación de carga predeterminada de llama.cpp, Qwen3-8B cabe en AMD Radeon RX 7800 XT con Q8_0 y un contexto de 8192 tokens. Una tarjeta necesita 10,4 GiB disponibles para «Cabe».
Con Q8_0, la mayor longitud de contexto que cabe es de 37.888 tokens.
Perfil de ejecución: llama.cpp, motor ROCm en Linux (GPU discreta AMD), todas las capas en la GPU, Flash Attention activado, micro-lote (-ub) 512, KV cache F16, contexto (-c) como se indica; «cabe» se evalúa con las 4 secuencias paralelas predeterminadas de llama-server (-np auto, KV cache unificada) y «no cabe» con 1 secuencia; GPU inactiva, sin otros programas que usen su memoria.
Memoria contada como disponible para «Cabe» (C_low): 14,75 GiB por tarjeta = 16 GiB nominales − 16 MiB (nominal menos el total que llama.cpp indicó para esta GPU en registros públicos) − 1216 MiB (el mayor uso de arranque y de ejecución observado en los registros públicos de este perfil), redondeado hacia abajo a un múltiplo de 64 MiB.
Estos resultados se aplican a la configuración observada en registros públicos, en la que llama.cpp indicó 16.368 MiB de memoria total para esta GPU. No se cubren los ajustes que reducen la memoria utilizable (por ejemplo, ECC, si la tarjeta lo admite).
Memoria usada para «No cabe» (C_high): los 16 GiB completos por tarjeta. Perfiles de ejecución y sus mediciones
Memoria necesaria por cuantización y longitud de contexto
| Cuantización | 4096 | 8192 | 32.768 |
|---|---|---|---|
| Q8_0 | 9,8 GiB Cabe | 10,4 GiB Cabe | 14,0 GiB Cabe |
| Q6_K | 8,0 GiB Cabe | 8,6 GiB Cabe | 12,2 GiB Cabe |
| Q5_K_M | 7,2 GiB Cabe | 7,8 GiB Cabe | 11,4 GiB Cabe |
| Q4_K_M | 6,5 GiB Cabe | 7,1 GiB Cabe | 10,7 GiB Cabe |
Alternativas
Otras GPUs de 16 GB en las que Qwen3-8B cabe
El modelo más grande de la misma familia que cabe en AMD Radeon RX 7800 XT
Fuentes
- Página del modelo, con todas las cuantizaciones y sus archivos: Qwen3-8B
- Página de la GPU, con cada especificación y sus fuentes: AMD Radeon RX 7800 XT
- Archivos del modelo en Hugging Face (revisiones fijadas): Qwen/Qwen3-8B@b968826, Qwen/Qwen3-8B-GGUF@7c41481
- Tamaño de memoria de AMD Radeon RX 7800 XT según: Wikipedia: Radeon RX 7000 series (CC BY-SA 4.0), ROCm documentation gpu-specs.rst (MIT)
- Metodología