
openai, google, microsoft এবং anthropic রোবটস.txt-এ একটি সাধারণ "no ai training" লাইন মেনে চলবে। anthropic ইতিমধ্যে এটি করছে, openai "আগামী মাসগুলিতে", অন্য দুটি পরবর্তী বছর। meta এটিকে সমর্থন করার কথা বলেছিল, কিন্তু এটি মেনে চলবে কিনা তা বলেনি lol। আমার robots.txt একটি stackoverflow পোস্ট থেকে নেওয়া।