অনন্য ফাইলের নাম সহ নতুন একগুচ্ছ ফাইল একটি সার্ভারে নিয়মিত "উপস্থিত হয়" 1 । (প্রতিদিন কয়েকশো জিবি নতুন ডেটা-র মতো, দ্রবণটি টেরাবাইটে স্কেলযোগ্য হওয়া উচিত Each প্রতিটি ফাইল বেশ কয়েকটি মেগাবাইট বড়, কয়েক দশক মেগাবাইট পর্যন্ত up)
বেশ কয়েকটি মেশিন রয়েছে যা এই ফাইলগুলি প্রক্রিয়া করে। (দশকগুলি, সমাধানগুলি কয়েকশকে স্কেলেযোগ্যযোগ্য হওয়া উচিত)) সহজেই নতুন মেশিনগুলি যুক্ত করা এবং মুছে ফেলা সম্ভব উচিত ।
এখানে ব্যাকআপ ফাইল স্টোরেজ সার্ভার রয়েছে যার উপর প্রতিটি আগত ফাইল অবশ্যই সংরক্ষণাগার সঞ্চয় করার জন্য অনুলিপি করা উচিত । ডেটাটি হারাতে হবে না, সমস্ত আগত ফাইল অবশ্যই ব্যাকআপ স্টোরেজ সার্ভারে সরবরাহ করা উচিত।
প্রতিটি ইনকামিং ফাইল myst প্রক্রিয়াকরণের জন্য একটি একক মেশিন সরবরাহ করা, এবং ব্যাকআপ স্টোরেজ সার্ভারে কপি দিতে হবে।
রিসিভার সার্ভার ফাইলগুলি সেগুলি তাদের পাঠানোর পরে সংরক্ষণ করার প্রয়োজন নেই।
উপরে বর্ণিত পদ্ধতিতে ফাইলগুলি বিতরণ করার জন্য দয়া করে একটি শক্তিশালী সমাধানের পরামর্শ দিন। সমাধান জাভা ভিত্তিক করা উচিত নয় । ইউনিক্স-ওয়ে সমাধানগুলি পছন্দনীয়।
সার্ভারগুলি উবুন্টু-ভিত্তিক, একই ডেটা-সেন্টারে অবস্থিত। অন্যান্য সমস্ত বিষয় সমাধানের প্রয়োজনীয়তার জন্য মানিয়ে নেওয়া যেতে পারে।
1 দ্রষ্টব্য যে ফাইলগুলি সিস্টেমে ফাইলগুলি যেভাবে স্থানান্তরিত করা হয় সে সম্পর্কে আমি ইচ্ছাকৃতভাবে তথ্য বাদ দিচ্ছি। কারণটি হ'ল ফাইলগুলি তৃতীয় পক্ষগুলি দ্বারা আজকাল বেশ কয়েকটি ভিন্ন উত্তরাধিকারের দ্বারা প্রেরণ করা হচ্ছে (আশ্চর্যজনকভাবে যথেষ্ট, স্ক্রিপ এবং এমকিউ এর মাধ্যমে)। ফাইলসিস্টেম স্তরে ক্রস-ক্লাস্টার ইন্টারফেসটি কাটা সহজ বলে মনে হয় তবে এক বা অন্য সমাধানের জন্য যদি কিছু নির্দিষ্ট পরিবহণের প্রয়োজন হয় - লিগ্যাসি ট্রান্সপোর্টগুলি সেই একটিতে উন্নীত করা যেতে পারে।