2
ইন্টারনেট আর্কাইভের উপর নিয়ন্ত্রণ কেবল "অস্বীকার করুন /" ছাড়াও?
কোনও সাইটে ইন্টারনেট সংরক্ষণাগার সংরক্ষণাগারটি নিয়ন্ত্রণ করার কোনও ব্যবস্থা আছে কি? আমি যুক্ত করতে পারি এমন সমস্ত পৃষ্ঠা বাতিল করতে জানি : User-agent: ia_archiver Disallow: / আমি কি বটকে বলতে পারি যে আমি চাই যে তারা আমার সাইটটি মাসে একবার, বা বছরে একবার ক্রল করবে? আমার কাছে একটি সাইট / …