
Satu perkara yang menonjol dalam ExpRL ialah ia memaparkan kelemahan dalam cara kita memikirkan kemajuan AI pada masa kini. Sebahagian besar tolok ukur hanya mengukur sama ada model mencapai jawapan yang betul. Jarang sekali ia mengukur berapa banyak idea berguna yang telah diuji dan dibuang sepanjang proses tersebut. Inovasi manusia sering datang daripada percubaan yang gagal, bukan daripada yang sempurna. Seorang saintis mungkin menguji ratusan hipotesis yang salah sebelum menemui yang betul. Namun, RL tradisional memperlakukan setiap laluan yang gagal sebagai sama tidak bernilai. ExpRL mencadangkan mungkin terdapat maklumat berharga yang tersembunyi di dalam kegagalan-kegagalan tersebut. Gagasan ini terasa penting jauh melampaui tolok ukur matematik. Apabila agen AI menjadi lebih cekap, pemenangnya mungkin bukan model yang paling pantas menemui jawapan, melainkan model yang paling banyak belajar daripada kesilapan. Inilah sebabnya pengesahan penting. Tanpa cara yang boleh dipercayai untuk menilai penaakulan dan output sementara, kita tidak dapat membezakan eksplorasi yang produktif daripada ilusi semata-mata. Masa depan AI mungkin bergantung kurang pada penghasilan jawapan, dan lebih kepada pemahaman kesilapan mana yang patut dipelajari. @ritualnet
