আমি আজ আমার এসইও নিউজে এই নিবন্ধটি পেরিয়ে এসেছি। এর থেকে বোঝা যাচ্ছে যে আপনি রোবট.টিএসটিএসটিতেNoindex:
স্ট্যান্ডার্ড Disallow:
নির্দেশিকা ছাড়াও নির্দেশিকা ব্যবহার করতে পারেন ।
Disallow: /page-one.html
Noindex: /page-two.html
দেখে মনে হচ্ছে এটি অনুসন্ধান ইঞ্জিনগুলিকে প্রথম পৃষ্ঠার ক্রলিং থেকে আটকাতে এবং পৃষ্ঠাগুলির দুটি সূচিকরণ থেকে বিরত করবে।
গুগল এবং অন্যান্য অনুসন্ধান ইঞ্জিনগুলি দ্বারা কি এই রোবটস.টিএক্সটির নির্দেশিত সমর্থন রয়েছে? এটা কি কাজ করে? এটি কি নথিভুক্ত?
disallow
Google থাকে তবে তার উপস্থিতি এবং সন্তানের পৃষ্ঠাগুলিতে লিঙ্কগুলি আবিষ্কার করা বন্ধ করে দেয়। যদিও noindex
কেবল পৃষ্ঠা তালিকাভুক্ত হচ্ছে স্টপ, এটা আবিষ্কারের থামবে না যখন অননুমোদিত আছে।
nofollow
মেটা ট্যাগগুলির জন্য কাজ করে। রোবটস.টি.এস.টি.এস . এর ক্ষেত্রেও যদি এটি হয় তবে তা জেনে রাখা ভাল লাগবে ।
<a rel="no-follow">
জন্যও একই । আমি এর কোনও আলাদা আচরণ করার কোনও কারণ দেখছি না। স্পষ্টতই এটি সরকারী নয় এবং এমনকি এটি জন মুলার দ্বারা রোবটস টেক্সটে ব্যবহার না করার পরামর্শ দেওয়া হয়েছিল তবে তার টুইট ছাড়া আমি এ সম্পর্কে খুব বেশি তথ্য সন্ধান করতে পারি নি।
Noindex
মধ্যে নির্দেশকে পতাকাঙ্কিত করে না robots.txt
।