Andrej Karpathy utilise Opus 5 pour générer 5 500 lignes de code pour un monde 3D de « Seigneur des Anneaux »

Selon les observations de Beating, Andrej Karpathy a fourni à Opus 5 les premières lignes de « Le Seigneur des Anneaux », avec un budget de 1 million de tokens, soit environ 10 dollars, pour qu'elle crée un monde 3D en utilisant Three.js. Le modèle a fonctionné pendant environ 2 heures et a généré 5 500 lignes de code. Il a dû positionner divers éléments polygonaux dans un espace tridimensionnel, puis écrire le code pour animer toute la scène. Le résultat est un peu brut, mais il a effectivement transformé le texte en un scénario 3D jouable. Ce type de contenu était autrefois peu susceptible d'être créé spécifiquement, car le coût et le temps n'étaient pas rentables. Les LLM, en revanche, peuvent le produire en continu, transformant des mondes hautement personnalisés en contenus générés à la demande. Karpathy imagine qu'à l'avenir, les utilisateurs pourront entrer dans ces mondes générés temporairement, devenant des personnages de l'histoire, des spectateurs ou des PNJ, comme un GTA apparaissant sur demande. Cependant, ce projet révèle également les limites actuelles des LLM : Opus 5 ne peut pas regarder des vidéos de manière efficace et native, ni jouer aux jeux, mais doit uniquement capturer lentement des images à différents points pour les vérifier. Pendant le processus, plusieurs erreurs se sont produites, laissant derrière elles de nombreux éléments grossiers et défectueux. Il est déjà capable de créer un monde, mais pas encore de l'inspecter et d'en faire l'expérience de manière fluide.