Penggali AI Meta Mengirim 9,1 Miliar Permintaan pada Q2, Memicu Alarm Server

Menurut pemantauan Beating, Meta sedang secara agresif mengambil konten web untuk membuat indeks pencarian AI-nya. Pengembang independen Pieter Levels mengatakan bahwa Meta melakukan pengambilan data frekuensi tinggi terhadap beberapa situs web miliknya minggu ini, hingga satu VPS mengalami beberapa kali peringatan beban. Data dari DataDome menunjukkan bahwa pada kuartal kedua tahun ini, dua crawler AI Meta secara total mengirimkan 9,1 miliar permintaan. Crawler Meta-WebIndexer yang bertanggung jawab atas pembuatan indeks pencarian mengalami pertumbuhan 163% dalam satu kuartal, dengan jumlah permintaan pada Juni pertama kali melebihi crawler pelatihan. Meta sejak 2024 telah diketahui sedang membangun mesin pencari sendiri untuk mengurangi ketergantungan Meta AI terhadap Google dan Bing. Kini, indeks pencarian ini sedang memperluas cakupannya dengan cepat, namun pengambilan data dengan intensitas sebesar ini hampir tidak membawa pengguna nyata ke situs web. Seorang karyawan Meta mengirimkan pesan pribadi yang mengungkapkan bahwa perusahaan ingin membuat 'Google' sendiri agar tidak mengirim permintaan pencarian AI ke Google, yang kemudian digunakan Google untuk pelatihan. Informasi ini saat ini hanya berasal dari sumber anonim dan belum dikonfirmasi oleh Meta.