
Я не знал, что у них есть неограниченный доступ в интернет. Это заставляет меня меньше доверять PostTrainBench. Потому что более новые модели имеют доступ к лучшим учительским моделям, лучшим наборам данных и лучшим статьям/методам для пост-обучения. Это завышает показатели самых новых моделей. Я не думаю, что необходимо повторно запускать каждую модель при добавлении новой, но считаю, что следует повторно запускать небольшой набор опорных моделей примерно каждые 1–3 месяца, чтобы оценить степень завышения показателей.
