একটি প্রক্সি মাধ্যমে অ্যাপাচি স্পার্ক ক্লাস্টার?


2

আমার চেয়ে বেশি নেটওয়ার্কিং / অ্যাপাচি স্পার্ক অভিজ্ঞতা রয়েছে তাদের কাছে এটি আরও একটি অনুমানমূলক প্রশ্ন।

আমার বর্তমান সেটআপ: দুটি 32 জিবি, 4 জিএইচজেড কোর আই 7 মেশিন আমি স্পার্ক ক্লাস্টারে বাঁধতে পছন্দ করি। তবে এগুলি ফায়ারওয়াল দ্বারা পৃথক করা হয়েছে: একটি আমার হোম ডেস্কটপ (আমি খুব সহজেই প্রয়োজনীয় পোর্ট ফরওয়ার্ডিং সেটআপ করতে পারি), এবং অন্যটি আমার কাজের ডেস্কটপ (কোনও বিভাগের ফায়ারওয়ালের পিছনে; অ্যাক্সেস অ্যাক্সেস না হওয়া পর্যন্ত আমি ইতিমধ্যে নেটওয়ার্কে নেই) ।

একটি তৃতীয় মেশিন রয়েছে: এটি আমার ওয়ার্কের নেটওয়ার্কের ডিএমজেডে কমবেশি বসে থাকে এবং এভাবে আমি বাইরে থেকে এসএসএইচ করতে পারি এবং সেখান থেকে আমার আমার ডেস্কটপে সরাসরি প্রবেশ করতে পারি। এই দু'জনের জন্য স্বচ্ছ স্পার্ক প্রক্সি হিসাবে কাজ করার জন্য এই মেশিনের মাধ্যমে কোনও পোর্ট-ফরওয়ার্ডিং সেটআপ চালানোর কোনও সম্ভাব্য উপায় আছে কি?

উত্তর:


0

আপনি আপনার স্পার্ক ক্লাস্টারের মাস্টার হিসাবে 3 য় মেশিন সেট আপ করতে পারেন, এটি অন্যান্য নোডের সাথে এসএসএসের মাধ্যমে যোগাযোগ করতে পারে তা নিশ্চিত করুন এবং এতে অ্যাপ্লিকেশন চালু করতে স্পার্ক-সাবমিট ব্যবহার করুন।

3 য় মেশিনে চালক চালানোর জন্য আপনাকে ক্লাস্টার মোডে আপনার আবেদন জমা দিতে হবে। অন্যান্য নোডগুলি মাস্টারে কর্মী হিসাবে নিবন্ধিত হয়ে গেলে তারা কাজগুলি গ্রহণ করা শুরু করবে।

এখানে আপনার কেবল সমস্যাটি হ'ল 3 টি নোডের (বিশেষত ওয়ার্কের ডেস্কটপ) মধ্যে যোগাযোগ হবে, কীভাবে মেশিনে কোনও অ্যাপ্লিকেশন চালু করবেন না আপনি নিজের ক্লাস্টারের মাস্টার হওয়ার সিদ্ধান্ত নেবেন কীভাবে।

আমাদের সাইট ব্যবহার করে, আপনি স্বীকার করেছেন যে আপনি আমাদের কুকি নীতি এবং গোপনীয়তা নীতিটি পড়েছেন এবং বুঝতে পেরেছেন ।
Licensed under cc by-sa 3.0 with attribution required.