Цього разу більше не означало краще. Основний учасник @valoryag доналаштував NVIDIA Nemotron 120B на даних з прогнозування від агентів Olas, використовуючи рецепт, що лежить в основі Olas-Predict-R1-14B: вибрані приклади міркувань, наглядне розігрівання, а потім підсилене навчання. Навчання проводилося через @thinkymachines’ Tinker. На 11 496 утриманих прогнозах Nemotron не показав чіткого покращення. До → після навчання: • Помилка Брієра (нижче — краще): 0,265 → 0,267 • Збалансована точність (вище — краще): 59,7% → 59,4% • Незрозумілі відповіді (менше — краще): 503 → 528 Наш навчений моделю 14B мав кращу калібрування, вищу збалансовану точність і лише 10 незрозумілих відповідей. Nemotron зберіг трохи нижчу помилку Брієра: 0,267 порівняно з 0,270. Чому рецепт не перенісся? Можливо, архітектура Nemotron з сумішшю експертів вимагає більш різноманітних даних або інших налаштувань навчання для прогнозування. Ми не перевіряли ці пояснення, тому причина залишається відкритою. Що ми дізналися: наш існуючий рецепт і бюджет навчання покращили модель 14B, але не принесли чіткого приросту для Nemotron. Наступним кроком ми протестуємо більш велику щільну модель з раннім перевірочним етапом для виявлення покращення, перш ніж вкладати повний ресурс. Прочитайте експеримент і результати: https://t.co/ZSziFiraIZ
Olas (formerly Autonolas)Поділитися
Джерело:Показати оригінал
Відмова від відповідальності: Інформація на цій сторінці може бути отримана від третіх осіб і не обов'язково відображає погляди або думки KuCoin. Цей контент надається лише для загального інформування, без будь-яких запевнень або гарантій, а також не може розглядатися як фінансова або інвестиційна порада. KuCoin не несе відповідальності за будь-які помилки або упущення, а також за будь-які результати, отримані в результаті використання цієї інформації.
Інвестиції в цифрові активи можуть бути ризикованими. Будь ласка, ретельно оцініть ризики продукту та свою толерантність до ризику, виходячи з ваших власних фінансових обставин. Для отримання додаткової інформації, будь ласка, зверніться до наших Умов використання та Розкриття інформації про ризики.