সার্ভারে ডিস্ক ক্লাস্টারের জন্য RAID এর বাইরে তদন্ত করা, ডায়নামিক ডিস্ক পুল তুলনীয় কি? [বন্ধ]

Question

হাইপার কনভার্জড সিস্টেমগুলির বিকাশের সাথে, আমরা বিতরণকৃত স্টোরেজ হ্যান্ডেল করতে RAID ব্যতীত অন্য প্রযুক্তি দেখতে পাই (উদাহরণস্বরূপ সিএফ বা ভিএসএএন বা নোটানিক্সের মতো বিতরণকৃত স্টোরেজ)।

তবে সেখানে কি ওপেন সোর্স টেকনোলজিটি অবজেক্ট স্টোরেজ থেকে উদ্ভূত হয়েছে যা আমি একক সার্ভারে প্রচুর বড় ডিস্কের সাথে ব্যবহার করতে পারি, আসুন 12 টি টু স্যাটা ডিস্কের একটি ডজন বলি যা তথ্য সুরক্ষা নিশ্চিত করবে তবে বিশাল পুনর্নির্মাণের সময়টিকে ছাড়াই যখন একটি প্রতিস্থাপন করবে ডিস্ক। সুতরাং ডায়নামিক ডিস্ক পুল ডি-ক্লাস্টারযুক্ত RAID- র একটি রূপ যা ইস্কি বা ফাইল সিস্টেম স্তরের মতো zfs বা brtrfs এর মতো ব্লক স্তরে ব্যবহার করা যেতে পারে।

আমি একটি সিনওয়ালজি বে (এনএফএস, ইস্কি লক্ষ্যমাত্রা, এসএমবি) তে বৈশিষ্ট্যযুক্ত তবে ব্লক স্টোরেজটির জন্য RAID ছাড়াই অনুরূপ কিছু সরবরাহ করতে চাই।

আপনার ইঙ্গিত জন্য ধন্যবাদ।

Comments

আপনি কী বিবেচনা করেছেন (উদাহরণস্বরূপ) একটি অতিরিক্ত অতিরিক্ত হিসাবে ষষ্ঠ ড্রাইভ সহ একটি RAID 5 অ্যারে?

— মাইক ওয়াটারস

প্রত্যেকে বড় আকারের জন্য RAID5 ব্যবহার না করার পরামর্শ দেয়। বিটিডব্লিউ রাইড 5 এর অর্থ 5 টি ডিস্ক নয়। তবে হ্যাঁ গরম খুচরা বাঞ্ছনীয়, তবে আমি ইতিমধ্যে গরম অতিরিক্ত সমস্যার সম্মুখীন হয়েছি, কখনও কখনও গরম অতিরিক্ত মারা যায় কারণ তারা ব্যবহারের আগে কয়েক বছর ধরে ঘুরছে।

— ডেমোকিক্স

আপনার আরও ডিস্ক লাগবে। বিলম্ব পুনর্নির্মাণের একমাত্র সমাধান হ'ল আরও বাড়াবাড়ি। কোডগুলি মুছে ফেলুন।

— ড্যান ডি

Answer 1

একটি একক সিস্টেমের জন্য, আমি সত্যিই ভালভাবে জেনে রাখা এবং রেড অ্যারে সম্পাদন করার পরামর্শ দেব। ক্লাসিকাল ব্লক / ফাইল অ্যাক্সেসের তুলনায় অবজেক্ট স্টোরগুলিতে উল্লেখযোগ্য পারফরম্যান্স পেনাল্টি রয়েছে এবং যদি আপনি মাপকাঠি না করেন তবে আপনি তাদের অনেক সুবিধা হারাবেন।

এটি বলেছিল, ক্লাসিকাল রেড বাদে আপনার নিম্নলিখিত সম্ভাবনা রয়েছে:

• নির্ভীক , যা ব্লক-স্তরের একের চেয়ে ফাইল-স্তরের প্রতিলিপি ব্যবহার করে

• glusterfs , প্রতিটি ডিস্কের জন্য একটি আলাদা ইট কনফিগার করা এবং replica 2নীতি প্রয়োগ করা

• zfs যা ব্লক-ভিত্তিক, ক্লাসিকাল সফ্টওয়্যার বা হার্ডওয়্যার RAID এর সাথে 100% অভিন্ন নয়

এছাড়াও লক্ষ করুন যে অবজেক্ট স্টোরেজ কম পুনর্নির্মাণ সময়ের গ্যারান্টি দেয় না ; একেবারে বিপরীতে, এটি দৃ rebu় প্রতিলিপি নীতিগুলি (যেমন: replica 3বিভিন্ন র্যাকের উপরে) গ্যারান্টি দিয়ে দীর্ঘ পুনর্নির্মাণগুলি মোকাবেলা করে ।

Comments

আমার বইয়ের জেডএফএসের বড় উত্সাহটি হ'ল এটি আপনাকে বলতে পারে যে কোন ফাইল (গুলি), যদি কোনওরূপে দূষিত হয়েছে; এবং আপনি যদি সেগুলি পড়তে সক্ষম হন তবে আপনি জানেন যে তারা নিরবচ্ছিন্ন। (আপনি যদি এটি করেন তবে ব্যতীত zfs set checksum=off, কেউ কেন জেডএফএস চালাবে এবং এটি করবে তা আমি কল্পনাও করতে পারি না)) এমনকি অনুপস্থিত স্টোরেজ অপ্রয়োজনীয়তা, এটি একটি বড় সুবিধা হতে পারে কারণ আপনি ঠিক কী জানেন আপনার বসের ... ... , গুরুত্বপূর্ণ স্প্রেডশিটগুলি ... ব্যাকআপ থেকে পুনরুদ্ধার করা দরকার।

— একটি সিভিএন

Answer 2

"এটি ডেটা সুরক্ষা নিশ্চিত করবে তবে কোনও ডিস্ক প্রতিস্থাপনের সময় পুনর্নির্মাণের বিশাল সময়ের অপূর্ণতা ছাড়াই"

আপনার একটি বিভ্রান্তি রয়েছে যা আপনি ভাবেন যে সফ্টওয়্যার বাস্তবতা - অর্থাত্ত পদার্থবিদ্যায় পরিবর্তন আনতে পারে। হিউ পুনর্নির্মাণের সময়গুলি সম্পূর্ণরূপে একটি সম্পূর্ণ ডিস্ক লেখার জন্য চলে যায় এবং আপনি যদি একটি ডিস্কে 2tb তথ্য লিখেন তবে এটি একটি দীর্ঘ সময় ব্যয় করে কারণ এটি কীভাবে বিপরীত HA বিশেষভাবে যদি আপনার প্রথম মামলাতে অনুপস্থিত তথ্য পাওয়ার জন্য একাধিক ডিস্ক পড়তে হয় (রেইড 5,6 অ্যানালগ)। "বোকা" সফ্টওয়্যার কীভাবে হতে পারে তার বিশদ রয়েছে (যেমন শারীরিক ন্যূনতমের উপরে সময় যোগ করুন), তবে ধীরে ধীরে বড় Sata ডিস্কের কথা বললে ন্যূনতমটি ইতিমধ্যে কয়েক ঘন্টা।

আপনার উল্লিখিত সমস্ত প্রযুক্তিতে একই সমস্যাযুক্ত বড় সময় আপনি এড়াতে চান কারণ - পদার্থবিজ্ঞান।

এবং এটি আপনাকে সহায়তা করে না যে আপনার ক্লাস্টার নেটওয়ার্কটি - যদি আপনি নেটওয়ার্কটির অনুলিপি করেন - 10 গ্রাম বা কম ব্যবহার করে 10g বা নিম্নতর (যা সম্ভবত সম্ভবত ঘটনাটি হয়) ব্যবহার করে।

Comments

আমার নিয়োগকর্তা একটি নেটওয়ার্ক বিশ্লেষক তৈরি করেন যা মূলত 2 * 100 জিবিই স্ট্যান্ডার্ড এনআইসি সহ একটি স্ট্যান্ডার্ড পিসি যা রিয়েলটাইমটিতে সংকুচিত ভিডিও স্ট্রিমিং ট্র্যাফিক বিশ্লেষণ করে। সুতরাং, এটি সম্পূর্ণ বিদেশী নয়, তবে ব্যবহারিকভাবে, হ্যাঁ, নেটওয়ার্কের গতি সম্ভবত অতিরিক্ত বাধা হয়ে উঠবে।

— জার্গ ডব্লু মিট্টাগ

ঠিক আছে, আমার সার্ভারগুলি আজকাল 2x100gb নিক - তবে তারপরে আমার প্রধান গ্রাহকের আইটি বিভাগ 1 জিবি (!) ব্যাকএন্ড নেটওয়ার্কের গতি "উচ্চ কার্যকারিতা" হিসাবে বিক্রি করে। পৃথিবী এমন প্রবালগুলিতে চলছে বলে মনে হয় যা উচ্চ শেষ কী তাও জানে না।

— টমটম

সমস্ত ডিস্ক এসএসডি হলে পুনর্নির্মাণের সময়টি কি খুব কমবে না?

— মাইক ওয়াটারস

নির্ভর করে। ঠিক আছে, না - হ্যাঁ, এটি হ্রাস পাবে তবে এসটিএটি 600 এমবি / সেকেন্ডে শীর্ষে রয়েছে এবং আপনি যদি একটি হাইপার কনভার্টেন্ট নেটওয়ার্ক চালনা করেন যার অর্থ এটি অবশ্যই নেটওয়ার্কের উপর দিয়ে যেতে হবে। এবং আপনার এমনকি সমস্ত এসএসডি প্রয়োজন নেই - একটি শালীন এসএসডি ক্যাশে পড়তে এবং লিখতেও সহায়তা করা উচিত (আমি প্রতিটি সার্ভারে ৩.6 জিবি এসএসডি ক্যাশে ব্যবহার করি)। তবে সত্যিই এটি হ্যান্ডেল করার জন্য আপনার ব্যাক হোন দরকার।

— টমটম

মাইক বললেন এসএসডি, সাটা নয়। কিছু পিসিআই-সংযুক্ত এসএসডি রয়েছে যা 600MB / s এর চেয়ে দ্রুতগতি সম্পন্ন।

— পিটার