Messages
avatar

DeepSeek-V4 peut désormais s'exécuter entièrement en local via les GGUF d'Unsloth. Voici à quoi ressemble réellement l'échelle de quantification : 1-bit : 92 Go de mémoire totale 2-bit : 102 Go 3-bit : 110-135 Go — s'exécute sur un Mac avec mémoire unifiée 4-bit quasi sans perte : 162 Go Q8 sans perte : 169 Go Quelques points à comprendre concernant spécifiquement la variante Flash : • 284 milliards de paramètres au total, mais seulement 13 milliards actifs en tout temps — l'architecture MoE signifie que vous n'exécutez pas le modèle complet, mais uniquement les experts pertinents • Le GGUF 8-bit sans perte fait 162 Go, mais le 3-bit descend à 103 Go sans perte de qualité significative Exécutez-le via Unsloth Studio ou llama.cpp. Le guide et les fichiers GGUF sont disponibles sur HuggingFace. Le modèle frontal de 1 trillion de paramètres, payant le trimestre dernier, s'exécute désormais sur du matériel grand public. Combien de temps avant que DeepSeek local dépasse les API intermédiaires hébergées ?

Ce contenu est uniquement fourni à titre informatif et éducatif. Il peut inclure des analyses de tiers, du contenu sponsorisé ou du matériel promotionnel pour lequel le créateur peut recevoir une compensation. Rien dans ce fil d’actualité ne constitue un conseil en investissement ni une garantie de rendement. Vous êtes seul responsable de vos décisions d’investissement. Effectuez toujours vos propres recherches et faites preuve de prudence avant de trader. Nous ne garantissons pas l’exactitude des informations de tiers et ne sommes pas responsables des pertes éventuelles. Les performances passées ne préjugent pas des résultats futurs. Veuillez consulter les Conditions de la communauté et notre Déclaration de divulgation des risques pour plus de détails.

avatarPubliez votre réponse

Commentaire