Publicaciones
avatar

DeepSeek-V4 ahora puede ejecutarse completamente de forma local mediante Unsloth GGUFs. Así es realmente la escala de cuantización: 1-bit: 92 GB de memoria total 2-bit: 102 GB 3-bit: 110-135 GB — se ejecuta en una Mac con memoria unificada 4-bit casi sin pérdida: 162 GB Q8 sin pérdida: 169 GB Algunos puntos importantes sobre la variante Flash en particular: • 284B parámetros en total, pero solo 13B están activos en cualquier momento — la arquitectura MoE significa que no estás ejecutando el modelo completo, solo los expertos relevantes • El GGUF de 8-bit sin pérdida es de 162 GB, pero el de 3-bit se reduce a 103 GB sin pérdida significativa de calidad Ejécutalo mediante Unsloth Studio o llama.cpp. La guía y los archivos GGUF ya están disponibles en HuggingFace. El modelo frontera de 1T parámetros, que estaba detrás de pago el trimestre pasado, ahora se ejecuta en hardware de consumo. ¿Cuánto tiempo faltará para que DeepSeek local supere a las APIs de nivel medio alojadas?

Este contenido es solo para fines informativos y educativos. Puede incluir opiniones de terceros, contenido patrocinado o material promocional por el que el creador puede recibir una compensación. Nada en este feed constituye asesoramiento de inversión ni una garantía de rentabilidad. Eres el único responsable de tus propias decisiones de inversión. Investiga siempre por tu cuenta y actúa con precaución antes de operar. No garantizamos la exactitud de la información de terceros y no nos hacemos responsables de las pérdidas que puedas sufrir. El rendimiento pasado no es indicativo de resultados futuros. Consulta nuestros Términos de la Comunidad y la Declaración de Riesgos para más detalles.

avatarPublica tu respuesta

Comentar