2
এলএসটিএম এর কোন স্তরটিতে ড্রপআউট?
LSTMড্রপআউট সহ একাধিক স্তর ব্যবহার করে, সমস্ত আড়াল স্তরগুলির পাশাপাশি আউটপুট ঘন স্তরগুলিতে ড্রপআউট রাখার পরামর্শ দেওয়া হয় কি? হিন্টনের কাগজে (যা ড্রপআউটের প্রস্তাব দিয়েছিল) তিনি কেবল ড্রপআউটকে ঘন স্তরগুলিতে ফেলেছিলেন, তবে এটি কারণ লুকানো অভ্যন্তরীণ স্তরগুলি সংবিধানমূলক ছিল। স্পষ্টতই, আমি আমার নির্দিষ্ট মডেলটির জন্য পরীক্ষা করতে পারি, তবে আমি …