昨日はGratisをご紹介しました。今日は@TPN_Labsが実際に生み出した成果の数値をお見せします。 コンペティション006では、ベースモデルとその圧縮版の勝者を、両者とも未経験の同一の密封ベンチマークで比較しました。 ベースモデルのスコアは16.99GBで66.57％でした。 勝者モデルのスコアは7.71GBで74.93％でした。 サイズは半分以下、スコアは8.4ポイント向上し、すべての7つのベンチマークカテゴリで改善が見られました。 これはつまり、以前は高性能なハードウェアが必要だったモデルが、一般のマシンで動くようになったということです。Hugging Faceからダウンロードして、Gratis内で自分で実行できます。 すべてのスコアは、正確なモデルバージョンと連動したパブリックダッシュボードに掲載されています。信頼に頼る必要なく、検証可能な結果です。 チームがこの成果をこれほど簡単に検証できる形で公開してくれたことに心からの敬意を表します。 毎週のサブネットの詳細をシンプルな英語でフォローしてください。 2/2