বিগত কয়েকদিন ধরে আমি আমাদের অবকাঠামোতে যে অদ্ভুততা ঘটছে তা বোঝার চেষ্টা করেছি কিন্তু আমি এটি আমাদের অনুধাবন করতে সক্ষম হইনি তাই আমি আপনাকে কিছু ইঙ্গিত দেওয়ার জন্য আপনাকে বলছি।
আমি গ্রাফাইটে লক্ষ্য করছি, লোড_এভিজে স্পাইক যা প্রায় 2 ঘন্টা পরে মারাত্মক নিয়মিততার সাথে ঘটে থাকে - এটি ঠিক 2 ঘন্টা নয় তবে এটি খুব নিয়মিত। আমি গ্রাফাইট থেকে নেওয়া এর একটি স্ক্রিনশট সংযুক্ত করছি
আমি এটি তদন্তে আটকে গিয়েছি - এর নিয়মিততা আমাকে ভাবতে পরিচালিত করেছিল যে এটি কোনও ধরণের ক্রোন জব বা এরকম কিছু তবে এই সার্ভারগুলিতে কোনও ক্রোনজব রয়েছে না - আসলে এগুলি র্যাকস্পেস ক্লাউডে চলছে ভিএম s আমি যা খুঁজছি তা হ'ল এক ধরণের ইঙ্গিত হতে পারে যে এই সমস্যাগুলি তৈরি করছে এবং কীভাবে এটি আরও তদন্ত করা যায়।
সার্ভারগুলি মোটামুটি নিষ্ক্রিয় - এটি একটি মঞ্চের পরিবেশ তাই প্রায় ট্র্যাফিক আসেনি / সেগুলিতে কোনও বোঝা থাকার কথা নয়। এগুলি হ'ল 4 টি ভার্চুয়াল কোর ভিএম। আমি যা নিশ্চিতভাবে জানি তা হ'ল আমরা প্রতি 10 সেকেন্ডে গ্রাফাইটের একগুচ্ছ নমুনা নিচ্ছি তবে এটি যদি বোঝার কারণ হয় তবে আমি আশা করি যে এটি প্রতিটি সার্ভারে 2 ঘন্টার তরঙ্গ হওয়ার চেয়ে ক্রমাগত উচ্চতর হবে।
এটি কীভাবে তদন্ত করতে হবে তার কোনও সাহায্যের প্রশংসা হবে!
এখানে অ্যাপ01 এর জন্য সর থেকে কিছু ডেটা দেওয়া হয়েছে - যা উপরের ছবিতে প্রথম নীল স্পাইক - আমি ডেটা থেকে কোনও সিদ্ধান্ত নিতে সক্ষম হইনি। এছাড়াও এটি নয় যে বাইটস স্পাইক লিখেছেন যা আপনি প্রতি আধা ঘন্টা (প্রতিটি 2 ঘন্টা নয়) ঘটতে দেখছেন প্রতি 30 মিনিটে শেফ-ক্লায়েন্টের কারণে চলছে। আমি আরও ডেটা সংগ্রহ করার চেষ্টা করব যদিও আমি ইতিমধ্যে এটি করে ফেলেছি তবে সেগুলির থেকে সত্যই কোনও সিদ্ধান্ত নিতে পারিনি।
বোঝা
09:55:01 PM runq-sz plist-sz ldavg-1 ldavg-5 ldavg-15 blocked
10:05:01 PM 0 125 1.28 1.26 0.86 0
10:15:01 PM 0 125 0.71 1.08 0.98 0
10:25:01 PM 0 125 4.10 3.59 2.23 0
10:35:01 PM 0 125 0.43 0.94 1.46 3
10:45:01 PM 0 125 0.25 0.45 0.96 0
10:55:01 PM 0 125 0.15 0.27 0.63 0
11:05:01 PM 0 125 0.48 0.33 0.47 0
11:15:01 PM 0 125 0.07 0.28 0.40 0
11:25:01 PM 0 125 0.46 0.32 0.34 0
11:35:01 PM 2 130 0.38 0.47 0.42 0
11:45:01 PM 2 131 0.29 0.40 0.38 0
11:55:01 PM 2 131 0.47 0.53 0.46 0
11:59:01 PM 2 131 0.66 0.70 0.55 0
12:00:01 AM 2 131 0.81 0.74 0.57 0
সিপিইউ
09:55:01 PM CPU %user %nice %system %iowait %steal %idle
10:05:01 PM all 5.68 0.00 3.07 0.04 0.11 91.10
10:15:01 PM all 5.01 0.00 1.70 0.01 0.07 93.21
10:25:01 PM all 5.06 0.00 1.74 0.02 0.08 93.11
10:35:01 PM all 5.74 0.00 2.95 0.06 0.13 91.12
10:45:01 PM all 5.05 0.00 1.76 0.02 0.06 93.10
10:55:01 PM all 5.02 0.00 1.73 0.02 0.09 93.13
11:05:01 PM all 5.52 0.00 2.74 0.05 0.08 91.61
11:15:01 PM all 4.98 0.00 1.76 0.01 0.08 93.17
11:25:01 PM all 4.99 0.00 1.75 0.01 0.06 93.19
11:35:01 PM all 5.45 0.00 2.70 0.04 0.05 91.76
11:45:01 PM all 5.00 0.00 1.71 0.01 0.05 93.23
11:55:01 PM all 5.02 0.00 1.72 0.01 0.06 93.19
11:59:01 PM all 5.03 0.00 1.74 0.01 0.06 93.16
12:00:01 AM all 4.91 0.00 1.68 0.01 0.08 93.33
আই
09:55:01 PM tps rtps wtps bread/s bwrtn/s
10:05:01 PM 8.88 0.15 8.72 1.21 422.38
10:15:01 PM 1.49 0.00 1.49 0.00 28.48
10:25:01 PM 1.54 0.00 1.54 0.03 29.61
10:35:01 PM 8.35 0.04 8.31 0.32 411.71
10:45:01 PM 1.58 0.00 1.58 0.00 30.04
10:55:01 PM 1.52 0.00 1.52 0.00 28.36
11:05:01 PM 8.32 0.01 8.31 0.08 410.30
11:15:01 PM 1.54 0.01 1.52 0.43 29.07
11:25:01 PM 1.47 0.00 1.47 0.00 28.39
11:35:01 PM 8.28 0.00 8.28 0.00 410.97
11:45:01 PM 1.49 0.00 1.49 0.00 28.35
11:55:01 PM 1.46 0.00 1.46 0.00 27.93
11:59:01 PM 1.35 0.00 1.35 0.00 26.83
12:00:01 AM 1.60 0.00 1.60 0.00 29.87
অন্তর্জাল:
10:25:01 PM IFACE rxpck/s txpck/s rxkB/s txkB/s rxcmp/s txcmp/s rxmcst/s
10:35:01 PM lo 8.36 8.36 2.18 2.18 0.00 0.00 0.00
10:35:01 PM eth1 7.07 4.77 5.24 2.42 0.00 0.00 0.00
10:35:01 PM eth0 2.30 1.99 0.24 0.51 0.00 0.00 0.00
10:45:01 PM lo 8.35 8.35 2.18 2.18 0.00 0.00 0.00
10:45:01 PM eth1 3.69 3.45 0.65 2.22 0.00 0.00 0.00
10:45:01 PM eth0 1.50 1.33 0.15 0.36 0.00 0.00 0.00
10:55:01 PM lo 8.36 8.36 2.18 2.18 0.00 0.00 0.00
10:55:01 PM eth1 3.66 3.40 0.64 2.19 0.00 0.00 0.00
10:55:01 PM eth0 0.79 0.87 0.08 0.29 0.00 0.00 0.00
11:05:01 PM lo 8.36 8.36 2.18 2.18 0.00 0.00 0.00
11:05:01 PM eth1 7.29 4.73 5.25 2.41 0.00 0.00 0.00
11:05:01 PM eth0 0.82 0.89 0.09 0.29 0.00 0.00 0.00
11:15:01 PM lo 8.34 8.34 2.18 2.18 0.00 0.00 0.00
11:15:01 PM eth1 3.67 3.30 0.64 2.19 0.00 0.00 0.00
11:15:01 PM eth0 1.27 1.21 0.11 0.34 0.00 0.00 0.00
11:25:01 PM lo 8.32 8.32 2.18 2.18 0.00 0.00 0.00
11:25:01 PM eth1 3.43 3.35 0.63 2.20 0.00 0.00 0.00
11:25:01 PM eth0 1.13 1.09 0.10 0.32 0.00 0.00 0.00
11:35:01 PM lo 8.36 8.36 2.18 2.18 0.00 0.00 0.00
11:35:01 PM eth1 7.16 4.68 5.25 2.40 0.00 0.00 0.00
11:35:01 PM eth0 1.15 1.12 0.11 0.32 0.00 0.00 0.00
11:45:01 PM lo 8.37 8.37 2.18 2.18 0.00 0.00 0.00
11:45:01 PM eth1 3.71 3.51 0.65 2.20 0.00 0.00 0.00
11:45:01 PM eth0 0.75 0.86 0.08 0.29 0.00 0.00 0.00
11:55:01 PM lo 8.30 8.30 2.18 2.18 0.00 0.00 0.00
11:55:01 PM eth1 3.65 3.37 0.64 2.20 0.00 0.00 0.00
11:55:01 PM eth0 0.74 0.84 0.08 0.28 0.00 0.00 0.00
ক্রোনজবস সম্পর্কে কৌতূহলযুক্ত লোকদের জন্য। সার্ভারে সেট করা সমস্ত ক্রোনজবসের সংক্ষিপ্তসারটি এখানে রয়েছে (আমি অ্যাপ্লিকেশন 01 বেছে নিয়েছি তবে একই ক্রোনজবস সেটআপ করার সাথে এটি কয়েকটি অন্যান্য সার্ভারেও ঘটছে)
$ ls -ltr /etc/cron*
-rw-r--r-- 1 root root 722 Apr 2 2012 /etc/crontab
/etc/cron.monthly:
total 0
/etc/cron.hourly:
total 0
/etc/cron.weekly:
total 8
-rwxr-xr-x 1 root root 730 Dec 31 2011 apt-xapian-index
-rwxr-xr-x 1 root root 907 Mar 31 2012 man-db
/etc/cron.daily:
total 68
-rwxr-xr-x 1 root root 2417 Jul 1 2011 popularity-contest
-rwxr-xr-x 1 root root 606 Aug 17 2011 mlocate
-rwxr-xr-x 1 root root 372 Oct 4 2011 logrotate
-rwxr-xr-x 1 root root 469 Dec 16 2011 sysstat
-rwxr-xr-x 1 root root 314 Mar 30 2012 aptitude
-rwxr-xr-x 1 root root 502 Mar 31 2012 bsdmainutils
-rwxr-xr-x 1 root root 1365 Mar 31 2012 man-db
-rwxr-xr-x 1 root root 2947 Apr 2 2012 standard
-rwxr-xr-x 1 root root 249 Apr 9 2012 passwd
-rwxr-xr-x 1 root root 219 Apr 10 2012 apport
-rwxr-xr-x 1 root root 256 Apr 12 2012 dpkg
-rwxr-xr-x 1 root root 214 Apr 20 2012 update-notifier-common
-rwxr-xr-x 1 root root 15399 Apr 20 2012 apt
-rwxr-xr-x 1 root root 1154 Jun 5 2012 ntp
/etc/cron.d:
total 4
-rw-r--r-- 1 root root 395 Jan 6 18:27 sysstat
$ sudo ls -ltr /var/spool/cron/crontabs
total 0
$
আপনি দেখতে পাচ্ছেন যে কোনও ঘন্টা ক্রোনজবস নেই। কেবল দৈনিক / সাপ্তাহিক ইত্যাদি
আমি একসংখ্যক পরিসংখ্যান সংগ্রহ করেছি (ভিএমস্ট্যাট, এমপিস্ট্যাট, আইওস্ট্যাট) - তবে আমি চেষ্টা করছি খুব সহজেই আমি এমন কোনও লিড দেখতে পাচ্ছি না যা কোনও ভিএম উপাদানকে দুর্ব্যবহারের পরামর্শ দেয় ... আমি হাইপারভাইজারের সম্ভাব্য সমস্যার দিকে ঝুঁকতে শুরু করছি। পরিসংখ্যানগুলিতে একবার নির্দ্বিধায় মনে করুন গিস্টটি "আপত্তিকর" সময়ের চারপাশে সর-কিউ আউটপুট দিয়ে শুরু হবে এবং তারপরে আপনি ভিএম, এমপি এবং আইওস্ট্যাটগুলি দেখতে পাবেন ....
মূলত এটি এখনও আমার কাছে সম্পূর্ণ রহস্য ...
