উত্তর:
সাবডোমেন ওয়েবসাইটের ডিরেক্টরিটির মূলের মধ্যে, robots.txt নামে একটি ফাইল যুক্ত করুন:
User-agent: *
Disallow: /
এটি ওয়েব ক্রোলারদের বলবে যে সাইটটি মোটেও সূচি না করে। তাদের মান্য করতে হবে না, তবে মূলগুলি তা করবে।
noindexআপনার সাব-ডোমেনের সূচি এবং অন্যান্য পৃষ্ঠাগুলিতেও যুক্ত করা উচিত
আপনার সাবডোমেনে একটি robots.txt ফাইল ব্যবহার করা সহায়তা করবে (এবং গুগল এটি মানবে), তবে আপনি নিতে পারেন এমন অন্য একটি পদক্ষেপটি আপনি কোনও Google ওয়েবমাস্টার অ্যাকাউন্টের সাথে উল্লেখ করতে পারেন যে আপনি চান না যে এই সাবডোমেনটিকে সূচীকরণ করা হোক। আপনি সাবডোমেনের সমস্ত পৃষ্ঠায় একটি মেটা ট্যাগও ব্যবহার করতে পারেন:
<meta name="robots" content="noindex">
যদি আপনি এমন কোনও সাইট হয়ে থাকেন যা আপনি কেবল অভ্যন্তরীণ পরীক্ষার জন্য ব্যবহার করছেন তবে আপনার ভার্চুয়াল হোস্ট ফাইলের আইপি অ্যাড্রেসগুলির নির্দিষ্ট সেটটিতে দৃশ্যমানতা সীমাবদ্ধ করা সাইটটিকে আরও লুকিয়ে রাখবে।
metaপ্রতিটি পৃষ্ঠায় একটি নোনাডেক্স ট্যাগ এম্বেড করার পরিবর্তে আপনি X-Robots-Tagনির্দিষ্ট সাবডোমেনের জন্য আপনার সার্ভার থেকে একটি HTTP প্রতিক্রিয়া শিরোনাম ফিরিয়ে দিতে পারেন - এটি আপনাকে কেবল একবার করতে হবে।
কেনজো এবং পল এর সমাধানগুলি ভাল, আপনি নিজের ওয়েব পৃষ্ঠাগুলিতে মেটা ট্যাগ নোডেক্স রাখতে পারেন এবং রোবটগুলি নিষ্ক্রিয় করতে robots.txt যুক্ত করতে পারেন।
তবে আমার মতে, সর্বোত্তম সমাধান হ'ল আপনার সাব ডোমেনে পাসওয়ার্ড প্রমাণীকরণ ব্যবহার করা। এটিই একমাত্র সমাধান যা আপনি নিশ্চিত যে রোবটগুলি আপনার ওয়েব সাইটে অ্যাক্সেস এবং সূচক করতে পারে। আপনি যদি অ্যাপাচি ব্যবহার করেন তবে আপনি htpasswd প্রয়োগ করতে পারেন ।
... বর্তমানে এসইও ফলাফল দেখাচ্ছে?
অন্যান্য উত্তরগুলি সুনির্দিষ্টভাবে অনুসন্ধান পৃষ্ঠাগুলি থেকে আপনার পৃষ্ঠাগুলি সরিয়ে দেওয়ার পরিবর্তে (সাব) ডোমেনের সূচি (যা প্রাথমিকভাবে আপনি প্রশ্নটিতে জিজ্ঞাসা করছেন) রোধ করার বিষয়ে আরও বেশি যা আপনার পরে কী হতে পারে তার বিচার করে আপনার অন্য প্রশ্ন ।
আপনি এখনও আপনার সাইটের ব্লক প্রয়োজন robots.txt এর এবং পরিবেশন করা মেটা meta ট্যাগ (বা X-Robots-Tag, যেমন অন্যান্য উত্তর বিবৃত HTTP প্রতিক্রিয়া হেডার), কিন্তু আপনার কাছে একটি 404 বা 410 স্থিতি কোড ফেরার আপনার পৃষ্ঠাগুলি অ্যাক্সেস অবরোধ করুন করতে হবে।
গুগল ওয়েবমাস্টার সরঞ্জাম সহায়তা পৃষ্ঠায় আপনি এটি সম্পর্কে আরও পড়তে পারেন:
সামগ্রী অপসারণের জন্য প্রয়োজনীয়তা
আপনার একবারে এই সমস্ত স্থানে রাখার পরে আপনি গুগল ওয়েবমাস্টার সরঞ্জামগুলিতে URL সরান সরঞ্জামটি ব্যবহার করতে পারেন । যাইহোক, এটি কেবল সম্পূর্ণ সাইট নয়, পৃথক ইউআরএলগুলিতে প্রযোজ্য তবে এটি একটি শুরু। (গুগল জানিয়েছে যে ডাব্লুডাব্লুটি অপসারণ সরঞ্জামটি ব্যবহার করার জন্য রোবট.এসটিএসটি, নোইনডেক্স এবং একটি ৪০৪ পরিবেশন করা প্রয়োজনীয়তা))
তবে, আপনি যদি এখনও নিয়মিত ব্যবহারকারীরা ইউআরএল টাইপ করে সাইটে অ্যাক্সেস করতে চান তবে এটি সমস্যা - কারণ আপনার সামগ্রীটি আর উপলভ্য নয়। জাস্টোলোইনের পরামর্শ অনুসারে আপনি এটি পাসওয়ার্ড দিতে পারেন, তবে এটি ডিফল্টরূপে 403 (নিষিদ্ধ) ফিরিয়ে দেবে যা আপনাকে 404/410 ফেরত দিতে ওভাররাইড করতে হবে। আপনি পারে ছদ্মবেশ আমাদের বিষয়বস্তু, Googlebot- এ একটি 410 ফিরে এসে বাকিদের প্রবেশ করতে সক্ষম হবেন - SERPs ফলাফল এ ক্লিক মানুষ সম্পর্কে কিন্তু কি?
তবে আপনি যদি গুগলটিকে দ্রুততম সময়ে আপনার সামগ্রীগুলি সরিয়ে নিতে চান তবে আপনাকে এটি "গুগল" ইন্টারনেট থেকে অপসারণ করতে হবে।