এটি আমার রোবটস টেক্সট :
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://www.example.org/sitemap.xml.gz
তবে গুগল ওয়েবমাস্টার সরঞ্জাম আমাকে বলে যে রোবটগুলি সাইটম্যাপে অ্যাক্সেস আটকাচ্ছে:
আপনার সাইটম্যাপটি অ্যাক্সেস করতে গিয়ে আমরা একটি ত্রুটির মুখোমুখি হয়েছি। দয়া করে নিশ্চিত করুন আপনার সাইটম্যাপটি আমাদের নির্দেশিকা অনুসরণ করে এবং অবস্থান আপনার দেওয়া এবং তারপর পুনরায় জমা থেকে অ্যাক্সেস করা যেতে পারে: URL দ্বারা সীমাবদ্ধ robots.txt এর ।
আমি পড়তে যে Google ওয়েবমাস্টার টুলস ক্যাশে robots.txt কিন্তু ফাইল চেয়ে বেশি 36 ঘন্টা আগে আপডেট করা হয়েছে।
হালনাগাদ:
টেস্টের সাইটম্যাপটি হিট করার ফলে গুগল কোনও নতুন সাইটম্যাপ আনতে পারে না। কেবলমাত্র সাবমিট সাইটম্যাপ এটি করতে সক্ষম হয়েছিল। (বিটিডাব্লু, আমি যদি সেখানে আপনার বর্তমান সাইটম্যাপটি পেস্ট না করি তবে 'টেস্ট সাইটম্যাপ'-এর মূল উদ্দেশ্যটি দেখতে পাচ্ছি না - এটি পরীক্ষার আগে আপনাকে যে ঠিকানাটি প্রবেশ করতে বলেছে, সেখান থেকে সাইটম্যাপের একটি নতুন কপি আনবে না - তবে এটি অন্য দিনের জন্য একটি প্রশ্ন।)
একটি নতুন সাইটম্যাপ জমা দেওয়ার পরে (পরীক্ষার পরিবর্তে) পরিস্থিতি পরিবর্তিত হয়েছিল। আমি এখন "ইউআরএল রোবটস.টি.টি . টেক্সট দ্বারা পেয়েছি The সাইটম্যাপে ইউআরএল রয়েছে যা রোবটসটেক্সট দ্বারা অবরুদ্ধ ।" 44 টি ইউআরএলের জন্য। সাইটম্যাপে ঠিক 44 টি ইউআরএল রয়েছে। এর অর্থ হ'ল গুগল নতুন সাইটম্যাপ ব্যবহার করছে তবে এটি এখনও পুরানো রোবট নিয়ম অনুসারে চলছে (যা সবকিছুকে সীমাবদ্ধ রেখেছিল) 44 টি ইউআরএল এর মধ্যে কোনওটিই নেই /wp-admin/
বা /wp-includes/
(যা কোনওভাবেই অসম্ভব, কারণ যেহেতু রোবটস টেক্সট উপর নির্মিত হয়েছে) একই প্লাগইন দ্বারা ফ্লাই যা সাইটম্যাপ তৈরি করে)।
আপডেট 2:
এটি আরও খারাপ হয়ে যায়: একটি গুগল অনুসন্ধান ফলাফলের পৃষ্ঠায়, হোমপেজের জন্য বিবরণটি পড়ে: "এই সাইটের রোবটস টেক্সটের কারণে এই ফলাফলের জন্য একটি বিবরণ পাওয়া যায় না - আরও জানুন"। অন্যান্য সমস্ত পৃষ্ঠাতে সূক্ষ্ম বিবরণ রয়েছে। হোমপেজের কোনও রোবটস.টিএসটিআরটি বা রোবট মেটা ব্লক করার সূচি নেই।
আমি আটকে গেছি.