আমার সাইট থেকে বটগুলি ব্লক করা উচিত এবং কেন?


12

আমার লগগুলি প্রায়শই পূর্ব ইউরোপ এবং চীন থেকে বট দর্শনার্থীদের দ্বারা পূর্ণ। বটগুলি আহেফস, সেজনাম, এলএসএসরোকটক্রোলার, ইয়ানডেক্স, সোগৌ এবং আরও কিছু হিসাবে চিহ্নিত। আমার সাইট থেকে এই বটগুলি ব্লক করা উচিত এবং কেন?

আমার সাইটে ট্র্যাফিক বাড়ানোর ক্ষেত্রে কোনটির বৈধ উদ্দেশ্য রয়েছে? তাদের মধ্যে অনেকগুলি এসইও।

আমাকে বলতে হবে যে বটগুলি প্রচুর সংখ্যায় উপস্থিত হওয়ার পরে আমি কোনও ট্রাফিক কম দেখি ।

এগুলি ব্লক করা খুব কঠিন হবে না কারণ তারা সকলেই তাদের ব্যবহারকারী এজেন্টে স্বীকার করে যে তারা বট।

উত্তর:


7

আপনি বটগুলি ব্লক করতে পারেন তবে এটি আপনার ওয়েবসাইটের জন্য আপনি কী চান তার উপর নির্ভর করে।

আপনি যদি কোনও নির্দিষ্ট অনুসন্ধান ইঞ্জিনে আপনার ওয়েবসাইটকে সূচিযুক্ত দেখতে না চান তবে আপনি অনুসন্ধান ইঞ্জিনের বটগুলি ব্লক করতে পারেন।
উদাহরণ: ইয়ানডেক্স হ'ল রাশিয়ান সার্চ ইঞ্জিন। আপনার ব্যবসা যদি রাশিয়াকে টার্গেট না করে তবে আপনি এর বটকে ব্লক করতে পারবেন।

আপনি যদি এসইও বটগুলি তাদের ওয়েব বিশ্লেষণ সমাধানটি ব্যবহার করতে না চান তবে অবরুদ্ধ করতে পারেন।
উদাহরণ: আহরেফস হ'ল ওয়েব অ্যানালিটিক্স সমাধান। আপনি যদি এই ওয়েব অ্যানালিটিক্স সমাধানটি ব্যবহার না করেন তবে আপনি এর বটকে ব্লক করতে পারেন।

বটগুলি ব্লক করার কারণ:

  • কম রোবট আপনার ওয়েবসাইটে যান এবং আরও ব্যান্ডউইথ রিয়েল দর্শনার্থীদের জন্য দায়ী করা হয়
  • ম্যালওয়্যার বটসের বিরুদ্ধে নিরাপদ থাকুন
  • লগ আকার

বটগুলি ব্লক না করার কারণ:

  • অনুসন্ধান ইঞ্জিনের বটগুলির মতো বটগুলি আপনার ওয়েবসাইটকে সূচী দিয়ে আপনার ট্র্যাফিক বাড়িয়ে তুলতে পারে।

আপনি রোবটস্টেক্সট.রোগ.এফএএকিউ পড়ে বুট সম্পর্কে আরও শিখতে পারেন ।

আপনি যদি বেশ কয়েকটি রোবট অবরুদ্ধ করতে চান তবে আপনি এই ওয়েবসাইটটি থেকে অনুপ্রেরণা নিতে পারেন রোবটস টেক্সট

সতর্কতা অবলম্বন করুন, কিছু বট এখানে রোবটস টেক্সট , আরও তথ্য উপেক্ষা করতে পারে ।

উপসংহার : আপনি ইন্টারনেট রোবট ফাংশনটিতে সেগুলি ব্লক করা কার্যকর হতে পারে কিনা তা নির্ধারণ করতে অনুসন্ধান করতে পারেন।


ধন্যবাদ। উপায় দ্বারা আমি লিনোড থেকেও ভিজিট পাচ্ছি। সংযুক্ত আরব আমিরাত বলেছে এটি পাইথন লিপি। আমার সন্দেহ হওয়া উচিত?
ফ্রাঙ্ক ই

আমি যদি তুমি হতাম, আমি লিনোডকে অবরুদ্ধ করিনি। হোস্টিং সম্পর্কে এটি ঠিক কী তা আমি জানি না।
জিস্টোলোইন

আইপিস্ট্রাডা কি হবে? আমি তাদের সময়ে সময়ে দেখছি। তারা কোনও অ্যাকাউন্টে সাইন আপ করে না।
ফ্রাঙ্ক ই

লিনোডের মতো। আপনি বা তারা কোনও অ্যাকাউন্টে সাইন আপ না করলেও রোবট ইন্টারনেট স্ক্যান করে। তবে চিন্তা করবেন না, এটি বড় কথা নয়।
জিস্টোলোইন

4

বটগুলি অবরুদ্ধ করার চেষ্টা করার সময় সংস্থানগুলি মুক্ত করতে এবং আপনার লগগুলি পরিষ্কার করতে সহায়তা করতে পারে এটি নোট করা গুরুত্বপূর্ণ যে রোবটস.টেক্সট এবং এমনকি পৃষ্ঠাগুলি নাইনডেক্সে মেটা ট্যাগ ব্যবহার করা আপনার বটগুলি আসলে বন্ধ করে দেয় না। তারা এখনও রোবট থেকে অস্বীকৃত অপসারণ করা হয়েছে কিনা তা দেখার জন্য মাঝে মাঝে আপনার সাইটটি ক্রল করতে পারে। প্রচুর বট এমনকি কোনও ব্যবহারকারী এজেন্ট ব্যবহার করে না এবং একটি মানক ব্যবহারকারী এজেন্ট ব্যবহার করবে। আমি যে বটগুলি উল্লেখ করছি সেগুলি হ'ল সাধারণত SEO ফসল কাটানো বটগুলি যা ব্যাকলিংকের জন্য স্ক্যান করে এবং অনুসন্ধান ইঞ্জিনগুলি থেকে পাওয়া সাধারণগুলি নয়।

আপনার দর্শনার্থীদের গণনা করার সময় এই বটগুলিকে আটকে দেওয়ার পরিবর্তে আপনার সাইটগুলি সক্রিয়ভাবে নিরীক্ষণ করার পরে আপনার বটগুলি কোনও রুক্ষ চিত্র স্থাপন করুন। বেশিরভাগ লোক অনন্য দর্শন সম্পর্কে যত্নবান হন এবং এটি ক্রমাগত ফিরতে থাকায় এইগুলি বাতিল করে দেয়। এই দিন এবং যুগে প্রচুর সার্ভার, শেয়ার্ড হোস্টিং রয়েছে যা এই বটগুলিকে পরিচালনা করতে পারে যাতে আপনি যে পৃষ্ঠাগুলি সূচী চান না তা বাদে আমি এই ধরণের বটগুলি ব্লক করার কোনও কারণ দেখতে পাচ্ছি না। অবশ্যই আপনার ক্ষতিকারক বট রয়েছে তবে এগুলি অবশ্যই ব্যবহারকারী এজেন্ট ব্যবহার করবে না;)।

ব্যক্তিগতভাবে আমি বিশ্বাস করি যে রোবটগুলি ব্লক করা সময়ের অপচয় হিসাবে তারা একেবারে এত বেশি সংস্থান ব্যবহার করে না, এসইও রোবটগুলি PR0 পৃষ্ঠাগুলিতে আপনার সাইটের তালিকা তৈরি করতে সহায়তা করতে পারে যা অবশ্যই আপনার পেজর্যাঙ্ক বাড়ায় এবং সেখানে স্বয়ংক্রিয়ভাবে যাতে আপনাকে শাস্তি না দেওয়া হয় তাদের দ্বারা.

লগ ইস্যু

আপনার একটি সঠিক লগ ভিউয়ার ব্যবহার করা উচিত যা আপনাকে নির্দিষ্ট অনুরোধগুলি ফিল্টার করতে সক্ষম করে দেয়, আপনার লগগুলি পর্যালোচনা করার সময় এটি আরও সহজ করে তোলে। ভাল দর্শকরা সাধারণ পরিদর্শন, 404s 'ইত্যাদির মতো প্রচুর পরিমাণে ফিল্টার আউট করতে পারে।


1
এসইও বটগুলি ব্যাকলিংকের জন্য কেন স্ক্যান করে? এটি কি কেবল এসইও পরামর্শদাতাদের ব্যবহারের কারণ? নাকি আরও কিছু দুষ্টু উদ্দেশ্য রয়েছে?
ফ্রাঙ্ক ই

2
হাই ফ্র্যাঙ্ক, তারা ব্যাকলিঙ্কগুলির জন্য স্ক্যান করে এবং তাদের লগ করে দেয় যাতে ওয়েবমাস্টাররা তাদের সাথে কে লিঙ্ক করছে তা দেখতে পাবে। এসইও সংস্থাগুলির ব্যাকলিংকগুলি লগ করা এবং ওয়েবমাস্টারদের সাথে কার লিঙ্ক তৈরি করা হয়েছে তা আবিষ্কার করার জন্য চার্জ করা বড় অর্থ, লিংকটি কখন তৈরি করা হয়েছিল, যদি এটি মুছে ফেলা হয়, যদি তার অনুসরণ হয় বা অনুসরণ না করে - তারা কোন অ্যাঙ্করযুক্ত টেক্সট ব্যবহার করে এবং এর বাইরেও। গুগল, বিং এই তথ্য সরবরাহ করে না তাই এটির একটি পছন্দসই পরিষেবা এবং বেশিরভাগ ওয়েব মাস্টারদের কাছে তাদের লিঙ্ক নেটওয়ার্কটি দেখতে ইচ্ছুক valuable
সাইমন হাইটার

লোকেরা অনুসন্ধান করে এমন অনেক দুর্বলতা সার্চ ইঞ্জিন ব্যবহার করে এবং প্রতিটি সাইটটিতে বট স্ক্যান না করে সংগ্রহ করা হয় এটিরও মূল্য নেই। উদাহরণস্বরূপ, যদি কোনও মডিউল / প্লাগইন পুরানো হয়ে যায় এবং সেখানে কোনও ज्ञিত শোষিত লোকেরা তাদের সাইটগুলি শোষণ করার জন্য গুগল ব্যবহার করবে। রোবটগুলি ব্লক করা আপনার সার্ভারটি সুরক্ষিত করবে না: পি
সাইমন হায়টার

@ ভলাব্লাইটস 'দ্বারা, আপনার অর্থ' দুর্বলতা '?
ডেভপ

@ ডেভপ একেবারে;) থেক্স - সংশোধন হয়েছে।
সাইমন হাইটার
আমাদের সাইট ব্যবহার করে, আপনি স্বীকার করেছেন যে আপনি আমাদের কুকি নীতি এবং গোপনীয়তা নীতিটি পড়েছেন এবং বুঝতে পেরেছেন ।
Licensed under cc by-sa 3.0 with attribution required.