আমি এস 3 এ 200 গিগাবাইট পণ্য চিত্র হোস্ট করছি (এটি আমার প্রাথমিক ফাইল হোস্ট)।
আমার কি সেই ডেটা অন্য কোথাও ব্যাক আপ করা দরকার, বা এস 3 সে হিসাবে নিরাপদ?
আমি এস 3 বালতিটি ইসি 2 ইনস্ট্যান্টে মাউন্ট করার এবং তারপরে একটি নাইট আরএসসিএন ব্যাকআপ তৈরি করার জন্য পরীক্ষা-নিরীক্ষা করছি। সমস্যাটি হ'ল এটি প্রায় 3 মিলিয়ন ফাইল, সুতরাং বিভিন্ন আরএসএনসি প্রয়োজন তৈরি করতে কিছু সময় নেয়। ব্যাকআপটি সম্পূর্ণ হতে প্রায় 3 দিন সময় নেয়।
কোনও ধারণা কীভাবে এটি আরও ভাল করবেন? (এটি এমনকি যদি প্রয়োজন হয়?)
উত্তর:
আমি এ নিয়ে গবেষণা করছি, যথেষ্ট মজার।
এস 3 এ আপনার ব্যাকআপগুলি আপনার অঞ্চলের উপর নির্ভর করে চূড়ান্ত ধারাবাহিকতার কারণে ব্যর্থ হতে পারে; প্রাথমিক সতর্কতা হ'ল আপনি যদি এটি পর্যাপ্ত পরিমাণে করেন তবে এক পর্যায়ে আপনার সার্ভারগুলির মধ্যে অ্যামাজন সিঙ্কের পটভূমিতে ফাইল সিস্টেম যাদু হিসাবে ফাইলগুলি খোলার বা সন্ধান করার ক্ষেত্রে ত্রুটি রয়েছে, সুতরাং আপনার ব্যাকআপগুলি বিশ্বাসযোগ্য নাও হতে পারে।
আপনার অন্য কোনও উপায়ে সংরক্ষণ করতে হবে কিনা তা নির্ভর করে এটি আপনার ঝুঁকি পরিচালনার উপর নির্ভর করে। আপনি কি অ্যামাজনকে আপনার ডেটা ধরে রাখতে বিশ্বাস করেন?
এটি সম্ভবত তারা কিছু হারাতে পারে বা তাদের স্টোরেজ সিস্টেমের বৃহত্তর ব্যর্থতা থাকতে পারে; তাদের চুক্তিতে কোনও সন্দেহ নেই যে তারা যদি আপনার ডেটা হারায় তবে এটাই আপনার সমস্যা। তাদের নয়। এছাড়াও, আপনার ডেটা অন্য কোথাও রাখা হয়েছে দেখে তারা কী করবে তা আপনি জানেন না; আইন প্রয়োগকারী আপনার ডেটা চান? অন্য কেউ এটি অ্যাক্সেস করেছে তা আপনি হয়ত জানেন না।
আপনি কি এটি বিশ্বাস করেন? যদি ডেটা আপনার ব্যবসায়ের মূল চাবিকাঠি না হয় এবং আপনি এই ঝুঁকিটি মানতে রাজি হন তবে অফসাইট-স্টোরেজ এ এটি ডাউনলোড করার দরকার নেই। যদি আপনি ঝুঁকি নিতে ইচ্ছুক না হন যে আপনার তথ্যটি অ্যামাজনের স্টোরেজ সার্ভারগুলিতে নিরাপদে থাকবে, আপনার নিজের স্টোরেজে পর্যায়ক্রমে এটিকে ডাম্প করার ব্যবস্থা করা উচিত।
অন্য কথায় আমি মনে করি না এর কোনও সরল উত্তর আছে কারণ এটি আপনার ঝুঁকি সহনশীলতা এবং ব্যবসায়ের প্রয়োজনের উপর নির্ভর করে। অনেক লোক পুরোপুরি মেঘের স্টোরেজে তাদের আয়ের উপর পুরোপুরি বিশ্বাস রাখে না, ব্যক্তিগতভাবে আমি সে সম্পর্কে কিছুটা সতর্ক বোধ করি ...
এটি আরও ভাল করার জন্য, আলোচনা এবং গবেষণায়, বিবেচনার জন্য অন্য পদ্ধতির মধ্যে একটি EBS ভলিউম তৈরি করা যথেষ্ট পরিমাণে তথ্য সংরক্ষণ করা, এটি ইসি 2 উদাহরণের সাথে সংযুক্ত করা, সেখানে আপনার ডেটা সংরক্ষণ করা, তবে আপনি ভলিউমটি আনমাউন্ট করতে পারবেন এবং সেই ডেটা এস 3 এ সংরক্ষণ করতে পারবেন you । আমি এটি S3 এর মধ্যে ভলিউম ফাইলটি সংরক্ষণ করে বা বিষয়বস্তুগুলিতে সংরক্ষণ করা হিসাবে সম্পন্ন করা হবে কিনা তা নিয়ে গবেষণার মাঝখানে আছি ... তবে স্টোরেজ ব্যয় বাঁচানোর জন্য আপনি ইবিএস উদাহরণটি মুছতে পারেন।
সম্পাদনা আমি পুনরায় পড়তে দেখতে পাচ্ছি যে আপনি ইসি 2 উদাহরণ থেকে এস 2 থেকে সংরক্ষণ করছেন, তদ্বিপরীত নয় (যদিও আমি জানি না যে চূড়ান্ত ধারাবাহিকতার বিষয়টি এখনও সেখানে সমস্যা সৃষ্টি করতে পারে)। আপনি ব্যাকআপ হিসাবে কোনও ইসি উদাহরণে ডেটা সংরক্ষণ করার চেষ্টা করছেন? আমি ভাবতে পারি যে ব্যয়বহুল এটি কোনও কার্যকর কৌশল নয়; আপনি যখন ভিএম সময়ের সাথে সেই ধরণের ডেটা দীর্ঘমেয়াদী স্টোরেজ করতে ফ্যাক্টর করেন তখন কোনও স্থানীয় ড্রাইভে জিনিসগুলি ব্যাক আপ করা সস্তার হতে পারে। ড্রাইভ ব্যয়ের সাথে আপনি ব্যাকআপ হিসাবে স্থানীয় ডিস্কে ডেটা অনুলিপি করতে পারেন।
আমি এখনও অ্যামাজন এবং তাদের স্টোরেজকে বিশ্বাস করার বিষয়ে সতর্কতাগুলি রাখব। আপনি যদি অ্যামাজন এস 3 এ সব কিছু রাখতে চান তবে আরও অতিরিক্ত অতিরিক্ত কাজ করতে চান তবে অঞ্চলগুলিতে আপনার এস 3 বালতিগুলি সদৃশ করুন এবং যদি কোনও অঞ্চলকে প্রভাবিত করে এমন আউটেজ থাকে তবে সেগুলি সমস্তই ছুঁড়ে ফেলা উচিত নয়। আপনি আশা করবেন। যদিও কিছু সম্ভব।
আপনি আপনার ডেটা কতটা মূল্যবান হন, এর জন্য আপনি কতটা দিতে ইচ্ছুক এবং আপনি কতটা ঝুঁকি সহ্য করতে চান তা নেমে আসে।
আমি এটি করতে এস 3 সিএমডি ব্যবহার করেছি s3cmd sync। এটি এর ক্রিয়াকলাপে কিছুটা আরএসসিএন-এর মতো, এবং আপনার পছন্দসই S3 এবং অন্য একটি লিনাক্স সিস্টেমের মধ্যে পুরো ডিরেক্টরিগুলি পুশ করে এবং টানতে পারে।
s3cmd syncআপনি কোনও চলমান ইসি 2 ইভেন্টে, এমনকি আপনার নিজের বিকাশকারী ওয়ার্কস্টেশন (বা কোনও স্টোরেজ সার্ভার) এ কেন পারছেন না তার কোনও কারণ আমি দেখতে পাচ্ছি না ।
আপনি একটি ভিপিসি উদাহরণ স্থাপন করতে চাইতে পারেন এবং তারপরে আপনি নিজের ভিপিসির অভ্যন্তরে একটি ছোট নোড নির্ধারণ করতে পারবেন ব্যাকআপ সার্ভারের ভূমিকা এবং এটি উভয়কেই আইপি দিতে পারেন অ্যামাজনের নেটওয়ার্কের পাশাপাশি আপনার স্থানীয় সাবনেটের অভ্যন্তরে।
আমার পরামর্শ হ'ল আপনার ডেটা আপনার দায়িত্ব, অ্যামাজনের নয়। যদি ডেটা হারাতে খুব বড় বিষয় না হয় তবে নিজের ব্যাকআপটি করবেন না। যদি তা হয় তবে আমার নিজের মতো ব্যাকআপটি (খুব কমপক্ষে) একটি সস্তা জেবিওডি (এবং নিয়মিত যাচাই করে নিন)।
যেদিন তারা এটি হারিয়ে ফেলবে, আপনি অ্যামাজন আপনার ডেটার জন্য কতটা দায়বদ্ধতা নিতে আগ্রহী তা আপনি খুঁজে পাবেন।
যদি আপনি এটি সামর্থ্য করতে পারেন (যেমন আমি এটি করি) তবে আমার সার্ভারে আমার সমস্ত ডেটা সঞ্চিত আছে তবে এটি অ্যামাজন এস 3 থেকে টানছে। সুতরাং অ্যামাজন যদি কোনও কারণে নিচে চলে যায় (টাচ কাঠ) আমি কেবল আমার সার্ভার থেকে তাত্ক্ষণিকভাবে আমার সমস্ত ডেটা টানতে পারি। আমার সার্ভার থেকে আমি আমার স্থানীয় ড্রাইভে মাসিক ব্যাকআপ নিই। আমার ওয়েবসাইট সাইটে 2TB উপরের হিসাবে।
যদিও এটি একটি পুরানো থ্রেড, এটি গুগলিং এস 3 ব্যাকআপের সময় প্রথম জিনিসটি আসে, তাই আমি ভেবেছিলাম আমি এটিতে যুক্ত করব ...
আমি নিজেই এ নিয়ে কিছু গবেষণা করে আবিষ্কার করেছিলাম রক্লোন https://rclone.org/ - এটি ক্লাইড ফাইল স্টোরেজ পরিষেবাদির মধ্যে অনুলিপি করার জন্য ডিজাইন করা আরএসসিএন -ইশ সফ্টওয়্যার এবং তাদের বেশিরভাগের সমর্থন করে। কোনও অধিভুক্তি নেই এবং আমি এটি এখনও ব্যবহার করি নি তাই এটি ভাল বা খারাপ কিনা তা আমি বলতে পারি না তবে আমি ভেবেছিলাম এটি কারও সাহায্য করবে।
আমার কাছে মনে হয়েছে যে কোনও হোস্টেড পরিষেবার জন্য ক্লাউড-হোস্ট করা ফাইলগুলি (এস 3, গুগল স্টোরেজ, র্যাকস্পেস ক্লাউড ফাইলস, ইত্যাদি) ব্যাকআপ করে 'অফসাইট' করে does