আমি আপনাকে আপনার ক্রস-বৈধতায় ধরে নিয়েছি আপনি ডেটা দুটি অংশে বিভক্ত করেছেন, একটি প্রশিক্ষণ সেট এবং একটি পরীক্ষা সেট। এক ভাগে আপনি প্রশিক্ষণ সেট থেকে কোনও মডেল ফিট করে এবং পরীক্ষার সেটটির প্রতিক্রিয়া অনুমান করার জন্য এটি ব্যবহার করেন, তাই না? এটি আপনাকে পুরো মডেলের জন্য একটি ত্রুটি হার দেবে, কোনও একক ভবিষ্যদ্বাণীকের জন্য নয়।
সাধারণ লিনিয়ার রিগ্রেশন-এ ব্যবহৃত এফ-টেস্টগুলির মতো কিছু ব্যবহার করে ভবিষ্যদ্বাণীকারীদের জন্য পি-মানগুলি পাওয়া সম্ভব কিনা তা আমি জানি না।
উদাহরণস্বরূপ পশ্চাদপদ বা ফরোয়ার্ড নির্বাচন ব্যবহার করে আপনি মডেল থেকে ভবিষ্যদ্বাণীদের অপসারণের চেষ্টা করতে পারেন যদি এটি আপনার লক্ষ্য হয়।
আপনি সিভি পরিবর্তে প্রতিটি পূর্বাভাসীর জন্য একটি আস্থা অন্তর সন্ধান করতে বুটস্ট্র্যাপ ব্যবহার করতে পারেন এবং তারপরে এটি দেখতে কত স্থিতিশীল।
আপনি আপনার সিভিতে কতগুলি ভাঁজ ব্যবহার করেন, এটি কি এক-আউট ক্রস-বৈধতা ছেড়ে যায়?
আপনার উদ্দেশ্য কী তা সম্পর্কে আরও বিশদ এই প্রশ্নের উত্তর দিতে সহায়তা করবে।