
Eu não sabia que eles tinham acesso ilimitado à internet. Isso me faz confiar menos no PostTrainBench. Porque modelos mais recentes têm acesso a modelos professores melhores, conjuntos de dados melhores e artigos/métodos melhores para pós-treinamento. Isso infla as pontuações dos modelos mais recentes. Acho desnecessário reexecutar todos os modelos sempre que um novo for adicionado, mas acho que eles deveriam reexecutar um pequeno conjunto de modelos de referência a cada 1-3 meses para quantificar essa inflação de pontuação.
