CSS এবং টেমপ্লেটগুলি কি robots.txt এ অনুমোদিত ?
এটি কোন সমস্যা হতে পারে?
জুমলায়, সিএসএস এবং টেমপ্লেটগুলি robots.txt এ অনুমোদিত নয় । আমার আসন্ন ওয়েবসাইটগুলির জন্য সিএসএস, টেমপ্লেট ইত্যাদির জন্য রোবোটগুলিতে অনুমতি না দেওয়া বা না দেওয়ার একটি সমাধান খুঁজতে দয়া করে আমাকে সহায়তা করুন।
উত্তর:
গুগল খুব সম্প্রতি তাদের নির্দেশিকাগুলি আনুষ্ঠানিকভাবে আপডেট করেছে যে আপনার রোবট.টিএসটিএসএসে সিএসএস বা জেএস ফাইলগুলিতে অ্যাক্সেস আটকাবেন না । এটি নিশ্চিত করে যে গুগল যখন সাইটটি ক্রল করবে তখন এটি ব্রাউজারের মতো ঠিক রেন্ডার করতে পারে।
আপনি যদি সিএসএস বা জেএস ফাইলগুলি অবরুদ্ধ করেন তবে আপনার ওয়েবসাইটটি র্যাঙ্কিংয়ে কতটা পারফর্ম করে তা ক্ষতি করতে পারে।
এখানে আরও তথ্য: আমাদের প্রযুক্তিগত ওয়েবমাস্টার নির্দেশিকা এবং এখানে আপডেট করা : ওয়েবমাস্টার নির্দেশিকা id
এটি সাম্প্রতিক সুপারিশ হিসাবে অনেক ওয়েবসাইট এবং সিএমএসের (যেমন জুমলা) প্রায়শই এই জাতীয় ফাইলগুলি রোবটস.টি.এস.টি . তে অবরুদ্ধ করা হবে । এর পিছনে যুক্তিটি সাধারণত ছিল যে সার্চ ইঞ্জিনগুলিকে এই ফাইলগুলি ক্রল বা সূচীকরণের দরকার নেই, সুতরাং অপ্রয়োজনীয় ফাইল এবং ডিরেক্টরিগুলি ইনডেক্স হওয়া থেকে বিরত রাখতে এবং 'ক্রল বাজেট' বাঁচাতে এইগুলি প্রায়শই রোবটস.টি.এস.টি . তে অবরুদ্ধ করা হত ।
আপনার রোবট.টি.এস.টি.এস. এর কৌশলটি সর্বদা এই প্রশ্নের জবাব দেওয়া উচিত: আমার ওয়েবের কোন বিভাগটি কোনও রোবট দ্বারা ক্রল করা উচিত নয় এবং কোন বিভাগটি রোবট দ্বারা ক্রল করা যেতে পারে।
রোবটগুলি তাদের নিজস্ব যুক্তি বাস্তবায়িত করে এবং একাধিক উদ্দেশ্য রয়েছে (কেবল গুগলের কোনও ক্রলার নেই ...) সুতরাং আপনি যদি ধরে নিচ্ছেন যে কোনও রোবট আপনার সিএসএস এবং জেএস ফাইলগুলির দ্বারা কোনওভাবে "বিভ্রান্ত" হয়ে যায় তবে আপনি রোবটের ব্ল্যাক বাক্সটি খোলেন এবং কী ধরে নিবেন বর্তমান বাস্তবায়ন ও বর্তমান রোবট অভিপ্রায় নেই। এটি কোনও কার্যকর দীর্ঘমেয়াদী কৌশল নয়।
রোবটের ডোমেনে চিন্তা করার পরিবর্তে আপনার ওয়েবের বিষয়বস্তু ডোমেনে চিন্তা করার চেষ্টা করুন।
আমি উল্লেখ করতে চাই যে একটি রোবটস.টি.এস.টি ফাইল কোনও সুরক্ষা ব্যবস্থা নয়।
টেমপ্লেটগুলি ব্লগিং বা কন্টেন্ট ম্যানেজমেন্ট সফটওয়্যার (সিএমএস) অ্যাপ্লিকেশন দ্বারা ব্যবহৃত হয় এবং বাহ্যিকভাবে অ্যাক্সেসযোগ্য হওয়া উচিত নয় যেখানে ব্রাউজার এবং অনুসন্ধান ইঞ্জিনগুলি দ্বারা সিএসএস পড়া হয় এবং এটি পড়া উচিত। এটি বলার পরে, আমি কোনও একটিকে ব্লক করব না তবে সিএমএসের কোনও পরিবর্তনও করব না। অনুসন্ধান ইঞ্জিন এবং বটগুলি আপনার টেম্পলেটগুলির যত্ন করে না। ইউআরএল / ইউআরআই দ্বারা কেবল আপনার সাইটে অ্যাক্সেস ব্লক করুন যা আপনি সূচী বা পড়তে চান না তবে রোবট.টেক্সটকে সুরক্ষা সরঞ্জাম হিসাবে ভাবেন না। এটি তার জন্য ডিজাইন করা হয়নি।