
Я не знав, що вони мають необмежений доступ до інтернету. Це зменшує мою довіру до PostTrainBench. Оскільки більш нові моделі мають доступ до кращих вчителів, кращих наборів даних та кращих статей/методів для післятренування. Це завищує оцінки найновіших моделей. Я не вважаю необхідним перезапускати кожну модель при додаванні нової, але вважаю, що вони повинні перезапускати невеликий набір опорних моделей щонайменше раз на 1–3 місяці, щоб виміряти це завищення оцінок.
