Penggali AI Meta menghantar 9,1 bilion permintaan pada Q2, memicu amaran pelayan

Berdasarkan pemantauan Beating, Meta sedang secara agresif menggali laman web untuk mengindeks carian AI sendiri. Pembangun bebas Pieter Levels menyatakan bahawa Meta telah melakukan penggalian frekuensi tinggi terhadap pelbagai laman web miliknya minggu ini, sehingga satu VPS telah memicu amaran beban berulang kali. Data dari DataDome menunjukkan bahawa pada suku kedua tahun ini, dua crawler AI Meta menghantar sebanyak 9.1 miliar permintaan. Crawler Meta-WebIndexer yang bertanggungjawab untuk membina indeks carian mengalami pertumbuhan 163% dalam suku ini, dengan jumlah permintaan pada Jun pertama kali melebihi crawler pelatihan. Meta telah lama diberitakan sedang membangunkan enjin carian sendiri sejak 2024, dengan tujuan mengurangkan ketergantungan Meta AI terhadap Google dan Bing. Kini, indeks carian ini sedang memperluaskan dengan cepat, tetapi penggalian yang sangat intensif ini hampir tidak membawa pengguna sebenar ke laman web. Seorang pekerja Meta mengirimkan pesan peribadi yang mengungkapkan bahawa syarikat ingin mencipta "Google" sendiri, mengelakkan penghantaran permintaan carian AI kepada Google, yang kemudian digunakan oleh Google untuk pelatihan. Pernyataan ini masih hanya berdasarkan bocoran anonim dan belum disahkan oleh Meta.