Bot thu thập dữ liệu AI của Meta gửi 9,1 tỷ yêu cầu trong quý II, gây ra cảnh báo máy chủ

Theo dữ liệu từ Beating, Meta đang tích cực thu thập dữ liệu web để xây dựng chỉ mục cho công cụ tìm kiếm AI của mình. Nhà phát triển độc lập Pieter Levels cho biết, trong tuần này, Meta đã thu thập dữ liệu với tần suất cao trên nhiều trang web do anh vận hành, đến mức một máy chủ VPS đã nhiều lần kích hoạt cảnh báo tải. Theo thống kê của DataDome, trong quý hai năm nay, hai trình thu thập dữ liệu AI của Meta đã gửi tổng cộng 9,1 tỷ yêu cầu. Trong đó, Meta-WebIndexer – trình thu thập dữ liệu chịu trách nhiệm xây dựng chỉ mục tìm kiếm – tăng 163% so với quý trước, và lượng yêu cầu trong tháng 6 lần đầu tiên vượt qua trình thu thập dữ liệu dùng để huấn luyện. Meta đã bị phanh phui từ năm 2024 về việc tự phát triển công cụ tìm kiếm nhằm giảm sự phụ thuộc vào Google và Bing cho Meta AI. Hiện tại, hệ thống chỉ mục tìm kiếm này đang mở rộng nhanh chóng, nhưng việc thu thập dữ liệu với cường độ cao như vậy gần như không mang lại người dùng thực sự cho các trang web. Một nhân viên Meta đã nhắn tin riêng tiết lộ rằng công ty muốn tạo ra “Google” riêng của mình, tránh việc gửi các yêu cầu tìm kiếm AI đến Google để rồi bị Google dùng để huấn luyện. Thông tin này hiện chỉ là lời đồn vô danh và chưa được Meta xác nhận.