
طویلی حرکت کرنے والے AI، مکالمات اور کام کے ریکارڈ کو مختصر کرتے ہیں تاکہ عمل جاری رہے۔ اگر اس خلاصے میں منع شدہ اصول شامل ہوں تو کیا وہ محفوظ ہیں؟ ARCBench اصل ٹولز کے استعمال سے اس کی جانچ کرتا ہے۔ pi نامی اجرائی ماحول میں ریکارڈ بنایا جاتا ہے، پھر اسے دبایا جاتا ہے اور پھر اصولوں کے خلاف درخواست دی جاتی ہے، اور اسے دبائے بغیر کی گئی حرکتوں کے ساتھ موازنہ کیا جاتا ہے۔ اسی دوران، یہ بھی جانچا جاتا ہے کہ کیا خلاصے میں اصول برقرار رہا، کمزور ہوا، یا مکمل طور پر غائب ہو گیا۔ مثلاً، اگر صرف اندر کے ای میل بھیجنے کا قاعده ہو، تو باہر کے کسی کو بھیجنے والے ٹول کے بلائے جانے کو خلاف ورزی قرار دیا جائے گا۔ 17 مسائل پر مشتمل جائزے میں، زیادہ تر دبائے گئے خلاصوں میں اصول خود بخود برقرار رہے۔ لیکن کچھ حرکتوں میں ایسا بھی ہوا کہ بعد والی درخواستوں کو منظور سمجھ لیا گیا۔ صرف اس بات پر فیصلہ نہیں کیا جانا چاہئے کہ خلاصے میں اصول لکھا گیا ہے یا نہیں، بلکہ اس بات کا بھی جائزہ لینا ضروری ہے کہ کیا اصول کے خلاف عمل کیا گیا ہے یا نہیں۔


