Beating মনিটরিং অনুযায়ী, OpenRouter এর Ori Eval চালু হয়েছে, যা ডেভেলপারদের নিজের AI অ্যাপ্লিকেশনের জন্য কোন মডেল ব্যবহার করবেন তা নির্ধারণে সাহায্য করে। এটি কোডবেস স্ক্যান করে মডেল কলগুলি খুঁজে বের করে, তারপর প্রকল্পের বাস্তব কাজগুলি ব্যবহার করে বিভিন্ন প্রতিদ্বন্দ্বী মডেলগুলি পরীক্ষা করে। ডেভেলপাররা ফলাফল, গতি বা খরচের মধ্যে কোনটির ওপর বেশি জোর দিতে চান তা নির্দিষ্ট করতে পারেন। Ori Eval-এর পরীক্ষার সময়, টেস্টিং ফ্রেমওয়ার্ক, মডেল কনফিগারেশন এবং ইনফারেন্স ইনটেনসিটি লক করা থাকে, এবং শেষে সরাসরি র্যাঙ্কিং প্রদান করা হয়, যাতে ভিন্ন ভিন্ন পরীক্ষা শর্তের কারণে মডেলগুলির তুলনা না হয়। এটি শুধুমাত্র উত্তরগুলির মান পরীক্ষা করেই সীমাবদ্ধ থাকেনি, এটি Agent-এরও পরীক্ষা করেছে—যেমন, সঠিকটিরইটুলগুলিরইউটিলিজম,এবংঅপ্রয়োজনীয়অপারেশনগুলিকেবাদদিয়েছে।ডেভেলপারযদিওএকটিবাগকেপ্রাকৃতিকভাষায়বর্ণনাকরেন,তবেএটিঅবশ্যইএকটিটেস্টতৈরিকরবেযাসমস্যাটিকপুনঃউৎপন্নকরবে।সংশোধনকরারপরGitHubActions-এযুক্তকরলে,পরবর্তীতিথিতমডেল,প্রম্পটঅথবাকোডপরিবর্তনকরলেওস্বয়ংক্রিয়ভাবেপরীক্ষাকরাহবেযেসমস্যাটিআবারআসছেকিনা।সাধারণক্ষমতা-ভিত্তিকপাবলিকলিস্টগুলিশুধুমাত্রমডেলগুলিরসাধারণক্ষমতারতুলনামাত্রকরতপারে,যাসহজেইকসটমসাপোর্ট,সার্চঅথবাপ্রোগ্রামিংপণ্যগুলিরজন্যকোনমডেলনির্বাচনকরবেনতা-একটিসহজভাবেউত্তরদিতপারবেনা।OriEval-একটিম্যানুয়ালভাবেমডেলপরীক্ষা-করা-পদ্ধতিকএকটিবাস্তবব্যবসায়িকভিত্তিকস্বয়ংক্রিয়সিলেকশনপদ্ধতিতেপরিণতকরছে।
ওরিএভাল চালু করেছে ওপেনরাউটার, যা ডেভেলপারদের এআই মডেল বাছাইতে সাহায্য করবে
MarsBitশেয়ার
সারাংশ
ওরিইভাল চালু করার ঘোষণা দিয়েছে ওপেনরাউটার, যা ডেভেলপারদের তাদের প্রকল্পের জন্য সেরা এআই মডেলগুলি বাছাই করতে সাহায্য করবে। ওরিইভাল কোড রিপোজিটরি বিশ্লেষণ করে, বাস্তব কাজের সাথে মডেলগুলি পরীক্ষা করে এবং পারফরম্যান্স, গতি বা খরচের ভিত্তিতে তাদের র্যাঙ্কিং করে। এটি নিরপেক্ষ পরীক্ষা নিশ্চিত করে এবং সঠিক টুল ব্যবহারের পরীক্ষা করে। ডেভেলপাররা প্রাকৃতিক ভাষায় বাগ রিপোর্ট করতে পারেন, এবং ওরিইভাল সমস্যাগুলি পুনরুৎপাদনের জন্য টেস্টকেস তৈরি করে। এই টেস্টগুলিকে GitHub Actions-এ যোগ করা যেতে পারে যাতে নিয়মিতভাবে বৈধতা নিশ্চিত হয়। AI + crypto-এর খবরগুলি বাড়তে থাকা অবস্থায় এই প্রকল্পটির ঘোষণা করা হয়েছে।
উৎস:আসল দেখান
দাবিত্যাগ: এই পৃষ্ঠার তথ্য তৃতীয় পক্ষের কাছ থেকে প্রাপ্ত হতে পারে এবং অগত্যা KuCoin এর মতামত বা মতামত প্রতিফলিত করে না। এই বিষয়বস্তু শুধুমাত্র সাধারণ তথ্যগত উদ্দেশ্যে প্রদান করা হয়, কোন ধরনের প্রতিনিধিত্ব বা ওয়ারেন্টি ছাড়াই, বা এটিকে আর্থিক বা বিনিয়োগ পরামর্শ হিসাবে বোঝানো হবে না। KuCoin কোনো ত্রুটি বা বাদ পড়ার জন্য বা এই তথ্য ব্যবহারের ফলে যে কোনো ফলাফলের জন্য দায়ী থাকবে না।
ডিজিটাল সম্পদে বিনিয়োগ ঝুঁকিপূর্ণ হতে পারে। আপনার নিজের আর্থিক পরিস্থিতির উপর ভিত্তি করে একটি পণ্যের ঝুঁকি এবং আপনার ঝুঁকি সহনশীলতা সাবধানে মূল্যায়ন করুন। আরও তথ্যের জন্য, অনুগ্রহ করে আমাদের ব্যবহারের শর্তাবলী এবং ঝুঁকি প্রকাশ পড়ুন।