আমাদের কর্মক্ষেত্রে একটি মেশিন থাকবে, শিখর পারফরম্যান্সের ভিত্তিতে প্রতি ঘন্টা 50 ("হেড লিখুন") x 75 গিগাবাইট ডেটা চাপতে সক্ষম হওয়া উচিত । এটি 00 1100MB / s রাইটিং গতির সর্বোচ্চ কর্মক্ষমতা। মেশিন থেকে এটি পেতে, দুটি 10 গিগাবাইট লাইনের প্রয়োজন। আমার প্রশ্ন হ'ল কোন ধরণের সার্ভার + প্রযুক্তি এই জাতীয় ডেটা প্রবাহকে পরিচালনা করতে / সঞ্চয় করতে পারে?
বর্তমানে ডেটা স্টোরেজের জন্য আমরা জেডএফএসের সাথে কাজ করি, যদিও লেখার গতি কখনই প্রশ্ন ছিল না। (আমরা এই গতির কাছেও নেই) জেডএফএস (লিনাক্সে জেডএফএস) একটি বিকল্প হতে পারে? আমাদের প্রচুর ডেটাও সংরক্ষণ করতে হবে, "আইটি গাইড" মোট 50-75 টিবি এর মধ্যে কোথাও প্রস্তাব দেয়। সুতরাং আমরা যদি আমাদের প্রথম জন্মের সন্তানকে না দিতে চাই তবে এটি সম্ভবত সমস্ত এসএসডি হতে পারে না।
চমৎকার উত্তরের উপর ভিত্তি করে কিছু সংযোজন:
- সর্বোচ্চ পর্বের সময় 50x75 জিবি / ঘন্টা যা 24 ঘন্টাের চেয়ে কম হয় (সম্ভবত <6 ঘন্টা)
- আমরা শীঘ্রই এটি হওয়ার আশা করি না, সম্ভবত আমরা 5-10x75GB / ঘন্টা চালাব
- এটি একটি প্রাক-আলফা মেশিন, তবে প্রয়োজনীয়তাগুলি পূরণ করা উচিত (যদিও অনেকগুলি প্রশ্ন চিহ্ন খেলছে)
- আমরা মেশিন থেকে সার্ভারে সংযোগ হিসাবে এনএফএস ব্যবহার করব
- বিন্যাস: উত্পাদক মেশিন -> স্টোরেজ (এটি এক) -> (নিরাপদ অভিযান)) -> গণনা গুচ্ছ
- সুতরাং পড়ার গতি অপরিহার্য নয় , তবে এটি গণনা ক্লাস্টার থেকে ব্যবহার করা ভাল হবে (তবে এটি সম্পূর্ণ alচ্ছিক)
- সম্ভবত এটি বড় ডেটা ফাইল হতে চলেছে (অনেক ছোট নয়)