কোন ব্যাগিং অ্যালগরিদমগুলি র‌্যান্ডম ফরেস্টের উপযুক্ত উত্তরসূরি?


14

অ্যালগরিদম বাড়ানোর জন্য, আমি বলব যে তারা বেশ ভালভাবে বিকশিত হয়েছিল। ১৯৯৫ এর প্রথম দিকে অ্যাডাবোস্ট চালু হয়েছিল, তার কিছু পরে এটি গ্রেডিয়েন্ট বুস্টিং মেশিন (জিবিএম) ছিল। সম্প্রতি, ২০১৫-এর কাছাকাছি এক্সজিবিস্ট চালু হয়েছিল, যা সঠিক, ওভারফিটিং পরিচালনা করে এবং একাধিক কাগল প্রতিযোগিতার বিজয়ী হয়েছে। 2017 সালে মাইক্রোসফ্ট দ্বারা লাইটজিবিএম চালু হয়েছিল, এটি এক্সজিবিস্টের সাথে তুলনা করে একটি উল্লেখযোগ্যভাবে কম প্রশিক্ষণের সময় সরবরাহ করে। এছাড়াও, শ্রেণিবদ্ধ বৈশিষ্ট্যগুলি পরিচালনা করার জন্য ইয়্যান্ডেক্সের মাধ্যমে ক্যাটবুস্ট চালু করা হয়েছিল।

র্যান্ডম ফরেস্ট 2000 এর দশকের গোড়ার দিকে প্রবর্তিত হয়েছিল, তবে এর কোনও যোগ্য উত্তরসূরির কি আছে? আমি মনে করি যদি র‌্যান্ডম ফরেস্টের চেয়ে আরও ভাল ব্যাগিং অ্যালগরিদম উপস্থিত থাকে (যা সহজেই অনুশীলনে প্রয়োগ করা যেতে পারে) তবে এটি কাগলের মতো জায়গাগুলিতে কিছুটা মনোযোগ অর্জন করতে পারত। এছাড়াও, কেন উত্সাহ দেওয়া আরও জনপ্রিয় ছাঁটাই কৌশলতে পরিণত হয়েছিল, এটি কি কারণ আপনি একটি অনুকূল পূর্বাভাসের জন্য কম গাছ তৈরি করতে পারেন?


1
অ্যাডাবোস্ট আসলে 1995 সালে চালু হয়েছিল, তবে এটি একটি সামান্য বিষয় যা আপনার মৌলিক থিসিসটি পরিবর্তন করে না।
jboman

3
এলোমেলো বন হিসাবে আমরা অত্যন্ত এলোমেলো গাছের প্রবর্তনটিও দেখেছি , যদিও আমি কোনও ভাল প্রমাণ সম্পর্কে সত্যই অবগত নই যে এই ধারাবাহিকতায় এলোমেলো বনগুলিকে ছাপিয়ে গেছে, সুতরাং তারা "যোগ্য" উত্তরসূরি হতে পারে না ...
জ্যাক ওয়েস্টফল

1
বার্ট ( arxiv.org/abs/0806.3286 ) একটি বায়েশিয়ান মডেল যা একক গাছ বয়েসিয়ান কার্ট থেকে বিকশিত হয়েছিল এবং এটি ক্লাসিকাল সংগৃহীত পদ্ধতি দ্বারা অনুপ্রাণিত হয়েছিল। এটি অন্বেষণ মূল্যবান।
জেন

এটি দুর্বল শিখার কৌশলগুলির সাথে সাফল্যের সাথে অনেকগুলি সমস্যা হ্যান্ডেল করার কারণে বুস্টিং আরও জনপ্রিয় হয়ে উঠেছে
রিফেল

নিয়মিত লোভী বনগুলি শীতল পার্শ্ব প্রতিক্রিয়াগুলির জন্য উল্লেখযোগ্য (ধীর তবে কিছু ভাল ফলাফল) এবং কোয়ান্টাইল এলোমেলো বন হতে পারে।
মাইকেল এম

উত্তর:


3

xgboost, catboost এবং lightgbm এলোমেলো বনের কিছু বৈশিষ্ট্য (ভেরিয়েবল / পর্যবেক্ষণের এলোমেলো নমুনা) ব্যবহার করে, তাই আমার কাছে মনে হয় তারা একসাথে উত্সাহদান এবং আরএফের উত্তরসূরি এবং উভয়ের কাছ থেকে সেরা জিনিস নিয়ে যায়। ;)

আমাদের সাইট ব্যবহার করে, আপনি স্বীকার করেছেন যে আপনি আমাদের কুকি নীতি এবং গোপনীয়তা নীতিটি পড়েছেন এবং বুঝতে পেরেছেন ।
Licensed under cc by-sa 3.0 with attribution required.