মেটার এআই ক্রলার দ্বিতীয় ত্রৈমাসিকে 9.1 বিলিয়ন অনুরোধ পাঠায়, সার্ভার চেতাবনী জাগিয়ে তোলে

ডেটা মনিটরিংয়ের মাধ্যমে পর্যবেক্ষণ করা হয়েছে যে, মেটা তাদের এআই সার্চের জন্য ওয়েবসাইটগুলি অত্যধিকভাবে স্ক্র্যাপ করছে। স্বাধীন ডেভেলপার পিটার লেভেলস বলেছেন যে, মেটা এই সপ্তাহে তাঁর অনেকগুলি ওয়েবসাইটকে উচ্চ ফ্রিকোয়েন্সিতে স্ক্র্যাপ করছে, যার ফলে একটি VPS-এ বারবার লোড অ্যালার্ট ট্রিগার হয়েছে। DataDome-এর পরিসংখ্যান অনুযায়ী, ২০২৪ এর দ্বিতীয় ত্রৈমাসিকে, মেটার দুটি এআই ক্রলার মোট ৯.১ বিলিয়ন অনুরোধ পাঠিয়েছে। সার্চ ইনডেক্সিংয়ের জন্য দায়িত্বপ্রাপ্ত Meta-WebIndexer-এর ক্ষেত্রে এই ত্রৈমাসিকে ১৬৩% বৃদ্ধি হয়েছে, এবং জুন মাসের অনুরোধের সংখ্যা প্রথমবারের মতো ট্রেনিং ক্রলারকে ছাড়িয়েছে। ২০২৪ সালেই মেটা নিজস্ব সার্চ ইঞ্জিন তৈরির খবর প্রকাশিত হয়, যাতে Meta AI Google এবং Bing-এরউপর নির্ভরশীলতা কমানো যায়। এখন, এই সার্চ ইনডেক্সটি স্পষ্টভাবে দ্রুত বিস্তৃতির পথে, কিন্তু এই高强度-এর স্ক্র্যাপিংয়ের ফলেও,ওয়েবসাইটগুলিতে কোনও বাস্তবিক ব্যবহারকারীরা ফিরেআসছেনা।মেটারএকজনকর্মচারীপ্রাইভেটমেসেজেবলেছেনযে,কোম্পানিটিGoogle-এরপরিবর্তেনিজস্ব‘Google’তৈরিরচিন্তায়আছে,যাতেএআইসার্চঅনুরোধগুলিকেGoogle-এপাঠানোহয়না,যাGoogle-এরদ্বারাট্রেনিংয়েব্যবহৃতহত।এইঅংশটি目前শুধুমাত্রঅননমিকসূত্রদ্বারাপ্রকাশিতহয়েছে,মেটাদ্বারাঅপসময়হয়নি।