Googleは14ページをクロールするごとに1人の訪問者をウェブサイトに送信します。OpenAIは1,700ページごとに1人の訪問者を送信し、Anthropicは73,000ページごとに1人の訪問者を送信します。 Cloudflareはこれらの数値をもとに、従来の契約を無効と宣言しました。9月15日から、新しいドメインはデフォルトでAIトレーニングおよびエージェントクローラーをブロックし、クローリングはHTTP 402エラーに切り替えられ、利用課金制になります。 MEMOのアプローチは、データをスクレイピングする必要がないようにすることです。DIDは所有権を提供し、MEFSは宛先を提供し、ERC-7829は価格を提供します。エージェントはデータを秘密裏にスクレイピングするのではなく、これらを直接呼び出します。