
Après avoir regardé la sortie d’HRM-Text de @Sapient_Int, la chose qui ne cesse de me revenir à l’esprit est ceci : Et si le raisonnement cessait d’être incroyablement coûteux ? 👀 Car cela changerait tout. Soudainement, des idées qui avaient été pratiquement mises de côté pendant l’ère du scaling des transformeurs pourraient revenir : • Apprentissage continu • Petits modèles experts pour chaque domaine • Systèmes modulaires qui communiquent entre eux • Expérimenter à nouveau avec différentes architectures Ce qui rend HRM-Text intéressant, ce n’est pas seulement les scores sur les benchmarks. La partie vraiment intéressante, c’est le potentiel de rendre la recherche en IA à nouveau exploratoire. Un avenir où ce ne sont pas seulement les plus gros budgets en calcul qui gagnent, mais où les équipes qui testent des idées différentes peuvent réellement concourir 🔥
