ایک AI ایجینٹ نے اپنے ہی کھیل میں تقریباً 3,992 انسانی ٹیموں کو شکست دے دی۔ AIRA₂، جو میٹا کے FAIR لیب، یونیورسٹی کالج لندن اور اکسفورڈ یونیورسٹی کے تحقیقی ماہرین کے ذریعہ تیار کیا گیا ایک خودمختار AI تحقیقی ایجینٹ ہے، AI استدلال پر مبنی ایک Kaggle مقابلے میں 4,000 ٹیموں میں سے 8ویں نمبر پر رہا اور اس کے ساتھ سونے کا تمغہ بھی حاصل کیا۔
AIRA اصل میں کیا کرتی ہے
ایرا ایجنٹس کی لائن (جس کا نام AI Research Agent کے لیے ہے) پیچیدہ ماشین لرننگ انجینئرنگ کے مسائل کو خودکار طور پر حل کرنے کے لیے ڈیزائن کی گئی ہے۔ صرف ایک ماڈل چلانے اور بہترین نتیجہ کی امید رکھنے کے بجائے، ایرا 8 نوڈیا H200 جی پی یو پر مبنی ای سینکرونس متعدد جی پی یو اجراء کی حکمت عملی استعمال کرتا ہے۔
یہ سسٹم تحقیقی ٹیم کے مطابق ایک "چھپا ہوا مسلسل جائزہ" پروٹوکول استعمال کرتا ہے، جو ایجنٹ کو اپنے ٹیسٹ اسکورز کو گیم کرنے سے روکتا ہے۔ ایجنٹ متحرک ReAct طرز کے آپریٹرز بھی استعمال کرتا ہے، جس کا مطلب ہے کہ وہ مسائل کو مرحلہ وار سمجھ سکتا ہے، اپنے طریقہ کار کو فوری طور پر تبدیل کر سکتا ہے، اور متعدد پروسیسرز پر ایک ساتھ کوڈ اجراء کر سکتا ہے۔
MLE-bench-30 پر، جو 30 حقیقی کگل کے مقابلوں سے بنایا گیا ایک ساختی بینچ مارک ہے، AIRA₂ نے 24 گھنٹوں کی حسابگری کے بعد 81.5% کا اوسط فیصد رینک حاصل کیا۔ اگر اسے 72 گھنٹے دیے جائیں، تو یہ عدد بڑھ کر 83.1% ہو گیا۔ دیگر ایجینٹس کا بہترین پچھلا بنیادی نقطہ 72.7% تھا، جس سے AIRA₂ کا بہتری تقریباً مقابلے سے 9 فیصد نقطوں زیادہ تھا۔
یہ بات صرف فخر کرنے کے لیے نہیں بلکہ اہم ہے
AIRA₂ نے AIRS-Bench ایوانلیوشن میں 20 میں سے 6 ایسے کاموں پر انسانی سطح کی بہترین کارکردگی کو پار کر لیا۔ اس نے انفرادی Kaggle کاموں پر سونے کے تمغے بھی جیتے جہاں اگلی نسخوں کے ایجنٹ نے کبھی بھی کوئی انعام حاصل نہیں کیا تھا۔
یہ فریم ورک ٹیم کے زیرِ اثر AIRA-dojo ایپروچ پر مبنی ہے، جو پہلے ایجنٹس کی محدودیتوں کو دور کرنے کے لیے خصوصی طور پر ڈیزائن کیا گیا تھا۔ ان محدودیتوں میں محدود حسابی ٹھروپٹ، ایوانلیوشن کا اوورفٹنگ، مختلف مسائل کے درمیان جنرلائزیشن کے فرق، اور سٹیٹک آپریشنل پابندیاں شامل تھیں جن کی وجہ سے ایجنٹ کو کام کے دوران اپنی حکمت عملی تبدیل نہیں کرنے دی جا سکتی تھی۔
Competitive AI research landscape
میٹا FAIR، UCL اور اکسفورڈ کے درمیان تعاون اپنی اداراتی وزن کے لیے قابلِ ذکر ہے۔ تحقیقی ٹیم نے اپنے نتائج کو arXiv پریپرینٹس کے ذریعے شائع کیا، جو اعلیٰ AI تحقیق کا معیاری چینل ہے۔