এমএসএমকিউ বার্তা পেতে খুব ধীর

Question

আমরা একটি দুর্দান্ত বৃহত এমএসএমকিউ এনভায়রনমেন্ট সেটআপ পেয়েছি যা আজ একটি স্থবির স্থানে গ্রাইন্ড করার সিদ্ধান্ত নিয়েছে।

(সবকিছুই vSphere 4.0 আপডেট 1 এর অধীনে একটি ভিএম)

8 টি ওয়েব সার্ভার রয়েছে যা নেটে ক্লায়েন্টদের কাছ থেকে ডেটা গ্রহণ করে। এই মেশিনগুলিতে সমস্ত এমএসএমকিউ ইনস্টল করা আছে এবং কেবল এমএসএমকিউ বার্তাটি মূল এমএসএমকিউ সার্ভারে প্রেরণ করে। বার্তাগুলি বর্তমানে বহির্মুখী সারিতে পাইল করা আছে। এই মেশিনগুলি 2 জিগ র‌্যাম এবং 2 টি ভিসিপিইউ সহ উইন্ডোজ 2008 ওয়েব সংস্করণ।

আমাদের কাছে একটি ক্লাস্টার্ড এমএসএমকিউ সার্ভার (উইন্ডোজ ক্লাস্টার সার্ভার) রয়েছে যা 8 টি ওয়েব সার্ভারের বার্তা পায়। সারিতে থাকা তথ্যের পরিমাণের কোনও সীমা নেই। হার্ড ড্রাইভটি 50 জিগস এবং 46 গিগস মুক্ত স্থান রয়েছে। এই মেশিনগুলি 8 জিগ র‌্যাম এবং 4 টি ভিসিপিইউ সহ উইন্ডোজ 2008 এন্টারপ্রাইজ সংস্করণ। ক্লাস্টারে 2 টি ভিসিপিইউ থাকত তবে সিপিইউ লোড 100% হিট করছিল, তাই আমি উইন্ডোজ ক্লাস্টারের উভয় নোডকে 4 টি ভিসিপিইউতে বাড়িয়েছি।

4 টি অ্যাপ সার্ভার রয়েছে যা সারিগুলি থেকে বার্তাগুলি পড়ে এবং তাদের প্রক্রিয়া করে।

সাধারণত এটি সবই নিখুঁতভাবে কাজ করে তবে আজকের দিনে নয়।

আজ সকালে সবকিছু খুব ধীরে চলছে। 8 টি ওয়েব সার্ভার বর্তমানে বহির্মুখী সারিতে বসে 300k বার্তা প্রদর্শন করছে। ক্লাস্টার্ড সার্ভারটি বর্তমানে সারিগুলিতে এক মিলিয়নের বেশি বার্তাগুলি দেখায় (কিছুগুলি 200k এর চেয়ে কম)।

যদি আমি 8 টি ওয়েব সার্ভারগুলিতে পারফোনকে দেখি তবে এটি দেখায় যে আমি প্রতি সেকেন্ডে 2 বার্তা প্রেরণ করেছি। আমি যদি ক্লাস্টারে পারফোন দেখি তবে এটি প্রতি সেকেন্ডে ~ 7 টি বার্তা ক্লাস্টারে আসছে shows

যে মেশিনগুলি পড়ছে তারা প্রতিটি বার্তা পাচ্ছে না। দ্রুততম পরিষেবাগুলি প্রতি সেকেন্ডে 10-12 বার্তা পাচ্ছে, ধীরে ধীরে 0 বা 1 দেখাচ্ছে।

সম্প্রতি কেবলমাত্র পরিবর্তনগুলি হ'ল আমরা ফ্রন্ট এন্ড ওয়েব সার্ভারের সংখ্যা 4 থেকে 8 এ পরিবর্তন করেছি 8. আমরা প্রায় 2 সপ্তাহ আগে ইস্যু ছাড়াই এটি করেছি। মঙ্গলবার আমরা তাদের চালিত করেছিলাম যাতে বাকি 4 টি কীভাবে বোঝা পরিচালনা করতে পারে। বুধবার আমরা চারটি আরও নতুন মেশিন চালু করেছিলাম।

ক্লাস্টারের ডিস্কটি খুব কম আইও দেখায় এবং কোনও সারি নেই।

নিরাপদ থাকতে আমি পাওয়ারপথকে নতুন সংস্করণে আপডেট করেছি তবে এটি কোনওরকম সাহায্য করেনি।

8 টি ওয়েব সার্ভারগুলি একটি ভিএলএএন-তে রয়েছে এবং ক্লাস্টার'ড সার্ভার এবং অ্যাপ্লিকেশন সার্ভারগুলি দ্বিতীয় ভিএলএএন-তে রয়েছে। ভিএলএএনগুলির মধ্যে কোনও ফায়ারওয়াল নেই।

এবং কোনও মেশিনে অ্যাপ্লিকেশন বা সিস্টেম লগের জন্য দরকারী কিছু নেই।

Comments

দেখা যাচ্ছে যে ধীর এমএসএমকিউ পড়ার কারণটি আসলে একটি অ্যাপ্লিকেশন সমস্যা ছিল। পরিষেবাগুলি যা সারিবদ্ধ থেকে পড়েছে তারপরে ফাইল ভাগ করে নেবে। ফাইল ভাগটি দীর্ঘ এবং দীর্ঘ সময় নেওয়া শুরু করেছে, যার ফলে পরিষেবাগুলি ধীর হয়ে গেছে, যার ফলে সারিগুলি ব্যাক আপ হয়ে গেছে এবং এখন আমাদের মধ্যে গোলযোগ রয়েছে। স্পষ্টতই আমাদের ব্যবহারকারীর বেসটি পরিকল্পনার চেয়ে অনেক দ্রুত বৃদ্ধি পেয়েছে এবং আমরা স্যানের মধ্যে একটি RAID গোষ্ঠী তৈরি করি যা ফাইলের ভাগগুলি হোস্ট করে। সোমবার আমরা আমাদের বিক্রেতার সাথে আরও সান স্পেসের জন্য রাশ অর্ডার করব।

— mrdenny

আমরা এই সারি বৃদ্ধি সময়ের আগে দেখতে পাইনি কারণ আমাদের মনিটরিং সার্ভারটি একটি উইন্ডোজ 2003 সার্ভার, এবং উইন্ডোজ 2003 মেশিনের ক্লাস্টারযুক্ত উইন্ডোজ 2008 এমএসএমকিউ ক্যুগুলি দূরবর্তীভাবে পর্যবেক্ষণ করতে পারে না। পর্যবেক্ষণ সার্ভার ইতিমধ্যে মার্চ একটি আপগ্রেড জন্য নির্ধারিত। <sigh>

— mrdenny

Answer 1

যখনই কেউ বলে যে তাদের দশ লক্ষেরও বেশি বার্তা রয়েছে অ্যালার্ম ক্লাক্সনগুলি বন্ধ হয়ে যায়! বার্তাগুলি পরিচালনা করার জন্য কার্নেল (পেজযুক্ত পুল) মেমরির প্রয়োজন। আপনার কাছে যদি এমন বিশাল সংখ্যক বার্তা থাকে তবে ক্লাস্টার্ড সার্ভারে যা পাওয়া যায় তা আপনি ক্লান্ত করছেন। একটি সারিতে বার্তাগুলির সংখ্যার জন্য একটি অনুকূল সংখ্যা শূন্য - মূলত নিশ্চিত করুন যে আপনি বার্তাগুলি পৌঁছানোর চেয়ে দ্রুত প্রসেস করতে পারবেন।

আমি ওয়েব সার্ভারগুলি বন্ধ করে দেওয়া এবং বার্তাগুলি পুনরায় অনলাইনে ফিরিয়ে আনার আগে সম্পূর্ণরূপে প্রক্রিয়াজাতকরণের সুপারিশ করব।

এই ব্লগ পোস্টের আইটেম 4 রেফারেন্স: http://blogs.msdn.com/johnbreakwell/archive/2006/09/18/insuu-- উত্স- run-away-run-away.aspx

চিয়ার্স জন ব্রেকওয়েল (এমএসএফটি)

Comments

আমি এই মুহুর্তে পিএসএস-এ একটি কল পেয়েছি এবং আমি এখনই তাদের কাছে ফিরে আসার জন্য অপেক্ষা করছি। আমি ওয়েব সার্ভারগুলিতে কিউগুলিতে প্রবাহিত হওয়া থেকে বার্তাগুলি থামিয়েছি। ওয়েব সার্ভারগুলিতে আউটবাউন্ড সারিগুলি প্রতিটি এই মুহুর্তে 1 গিগের তথ্য দিয়ে পূর্ণ। ক্লাস্টারযুক্ত কাতারে প্রতিটিতে প্রায় সাড়ে ৪ মিলিয়ন বার্তা রয়েছে। খুব সহজেই আমরা খুব কম সংখ্যক বার্তা কাতারে রাখি কারণ আমরা খুব দ্রুত ডেটা প্রক্রিয়া করি। কিছু ঘটেছিল (কী তা নিশ্চিত নয়) এবং এটি সমস্ত জাহান্নামে চলে গেছে।

— mrdenny

জন, আমার জন্য উঁকি দেওয়ার জন্য ধন্যবাদ। টিএমকিউ থেকে প্রাপ্ত ফলাফলের ভিত্তিতে আমি অনুমান করছি যে এটি আমার সমস্যা। পুলের সীমাবদ্ধতা (কেবিতে আনুমানিক গণনা করা) পৃষ্ঠাযুক্ত: সীমা 307,200 397% জন্য ব্যবহৃত ননপ্যাজড: সীমা 262,144 49% এর জন্য ব্যবহৃত হয়েছে আমি পিএসএস আমাকে ফিরে ডাকার অপেক্ষায় থাকাকালীন স্রোত ধীরে ধীরে সারি পেয়েছি। এমভিপি শীর্ষ সম্মেলনের সময় আপনি যদি রেডমন্ডে থাকেন তবে আমাকে জানান, আমার উপর বিয়ার করুন।

— mrdenny

@ ব্যবহারকারী34024 আমরা প্রাথমিক সমস্যাটি পেয়েছি, যা আমি উপরে একটি মন্তব্য রেখেছি। সাহায্যের জন্য ধন্যবাদ.

— mrdenny

Answer 2

আমি আমাদের একটি সিস্টেমেডমিনকে জিজ্ঞাসা করেছি এবং তিনি বলেছিলেন যে আমাদের ম্যাজিক পয়েন্টটি ছিল 4 ওয়েব সার্ভার সর্বাধিক ভার্চুয়াল মেশিনে এমএসএমকিউ বক্স হিট করা, তারপরে তারা সমাধানের জন্য হার্ডওয়্যার বক্সে চলে এসেছিল। কী চলছে তা দেখতে প্যাকেট ক্যাপচার চেষ্টা করুন। প্রমাণীকরণের অনেক কি AD তে যাচ্ছে? চ্যাটি এমএসএমকিউ কেমন তা আপনাকে নেটওয়ার্ক পাথ এবং সম্ভবত প্রমাণীকরণের পথ সীমাবদ্ধ করতে হবে।

এইচটিএইচ, চক

Comments

আপনি যখন একক এমএসএমকিউ সার্ভারের সাথে 4 টিরও বেশি ওয়েব সার্ভারের সাথে কথা বলছেন তখন কী তারা ঠিক পিছনে পেরেছিল? স্টোরেজটি আইএসসিএসআই-এর উপরে সরাসরি এসএএন স্টোরেজ হয় তাই এটি প্রতি মন্তব্য হিসাবে স্টোরেজ সমস্যা হওয়া উচিত নয়। আমি 8 টি ওয়েব সার্ভারের মধ্যে 4 টি পাওয়ার করার চেষ্টা করব এবং আমি কী সামনে এসেছি তা দেখতে পাবো। আমি যদি আমার বসকে নতুন হার্ডওয়্যার কিনতে বলি, তবে খুব খারাপ কারণ দরকার।

— mrdenny

কেবল বার্তাগুলির আড্ডাবাজি। তারা কিছু প্রমাণীকরণ মিস কনফিগারেশনও পেয়েছে।

— এসকিউএলগুইচাক

আমার ধারণা আমি ওয়্যারশার্ক ডাউনলোড করব এবং এটি এমএসএমকিউ সার্ভারে রেখে দেব এবং এটি কী দেখায় তা দেখতে পাবো। এটি ওয়েব সার্ভারে রাখতে পারি না, এটি নেটওয়ার্ক ট্র্যাফিক লোডের কারণে প্রায় 30 সেকেন্ড পরে ক্র্যাশ হয়ে যায়।

— mrdenny

তাই আমি মেশিনে ওয়্যারশার্ককে বহিস্কার করেছি এবং আমি যে ওয়েব সার্ভারটি পর্যবেক্ষণ করছি তার বার্তাগুলির মধ্যে প্রায় 3 সেকেন্ড দেখছি seeing বলা বাহুল্য, এটি দেখতে ভাল লাগছে না।

— mrdenny

আমরা প্রাথমিক সমস্যাটি পেয়েছি, যা আমি উপরে একটি মন্তব্যে রেখেছি। সাহায্যের জন্য ধন্যবাদ.

— mrdenny

Answer 3

রিমোট প্রশাসনের অভাব সম্পর্কে আপনার মন্তব্য উল্লেখ করে, হ্যাঁ, এটি এমএসএমকিউ এবং পারফেক্ট কাউন্টারগুলির সাথে দুর্দান্ত গল্প নয়। থ্রেড অনুসরণ করে ও ওএসের সংমিশ্রণগুলি কী কাজ করে তা জানতে আগ্রহী সবার জন্য মোটল কুই ব্লগটি একবার দেখুন:

MSMQ 4.0 পারফরমেন্স কাউন্টারে এবং NetNameForPerfCounters রেজিস্ট্রি কী http://blogs.msdn.com/motleyqueue/archive/2007/12/14/msmq-4-0-performance-counters-and-the-netnameforperfcounters-registry-key.aspx

চিয়ার্স জন ব্রেকওয়েল (এমএসএফটি)