Message de ChainThink, le 16 mars : selon les informations officielles, le sous-réseau Bittensor Templar (SN3) a terminé le 10 mars la pré-formation la plus importante à ce jour du modèle LLM décentralisé Covenant-72B.
Covenant-72B est un modèle linguistique de 72 milliards de paramètres, pré-entraîné par l'équipe Templar sur le sous-réseau 3 de Bittensor, entièrement basé sur Internet général, sans nécessiter de centre de données centralisé. Le modèle a obtenu un score de 67,1 lors du test MMLU (zéro échantillon), surpassant des modèles de référence centralisés tels que LLaMA-2-70B et LLM360 K2 dans les mêmes conditions d'évaluation. Il s'agit du modèle collaboratif le plus vaste à ce jour à permettre une participation entièrement sans autorisation, avec plus de 70 nœuds différents ayant contribué des ressources de calcul tout au long de son fonctionnement. L'équipe a publié tous les poids et points de contrôle sous licence Apache.
Sous l'effet de cette nouvelle, Bittensor (TAO) et ses jetons de sous-réseau ont tous augmenté : TAO a grimpé de 54,8 % au cours des deux dernières semaines. Le jeton de sous-réseau τemplar a affiché une hausse de 194 % au cours des 7 derniers jours et est actuellement coté à 19,3 dollars.