কব্জি ক্ষতি বনাম লজিস্টিক ক্ষতির সুবিধা এবং অসুবিধা / সীমাবদ্ধতা


14

In ক্ষতি সংজ্ঞায়িত করা যায় এবং লগ ক্ষতি loss হিসাবে সংজ্ঞায়িত করা যায়সর্বোচ্চ(0,1-YআমিWটিএক্সআমি)লগ(1+ +মেপুঃ(-YআমিWটিএক্সআমি))

আমার নিম্নলিখিত প্রশ্নগুলি রয়েছে:

  1. কবজ ক্ষতির কোনও অসুবিধাগুলি রয়েছে (যেমন http://www.unc.edu/~yfliu/papers/rsvm.pdf এ উল্লিখিত outliers সম্পর্কে সংবেদনশীল )?

  2. অন্যটির তুলনায় একজনের পার্থক্য, সুবিধা, অসুবিধাগুলি কী কী?

উত্তর:


22

লোগারিদমিক লোকসান হ্রাস কমাতে ভাল আচরণ করা সম্ভাব্য ফলাফল আউটপুট বাড়ে।

কব্জি হ্রাস দ্বৈত উপর কিছু (গ্যারান্টিযুক্ত) দুর্যোগ বাড়ে, কিন্তু এটি সম্ভাবনা অনুমানের জন্য সাহায্য করে না। পরিবর্তে, এটি ভুল শৃঙ্খলাবদ্ধদের শাস্তি দেয় (এ কারণেই এটি মার্জিনগুলি নির্ধারণ করতে এত দরকারী): হ্রাসকারী কব্জা-ক্ষতি মার্জিনের ভুল বিভ্রান্তিকরণগুলি হ্রাস করার সাথে আসে।

সুতরাং, সংক্ষেপে:

  • লোগারিদমিক লোকসান নির্ভুলতার ব্যয়ে আরও সম্ভাব্যতার অনুমানের দিকে নিয়ে যায়

  • সম্ভাব্যতা সম্পর্কে খুব কম সংবেদনশীলতার দামে কব্জির ক্ষতি আরও ভাল নির্ভুলতা এবং কিছু স্পারসিটি বাড়ে


1
+1 টি। লজিস্টিক ক্ষয়ক্ষতি হ্রাস করা দ্বিপাক্ষিক সম্ভাবনা সর্বাধিকীকরণের সাথে মিলে যায়। স্কোয়ার-ত্রুটি ক্ষতি হ্রাস করা গাউসিয়ান সম্ভাবনা সর্বাধিকীকরণের সাথে সমান (এটি কেবল ওএলএস রিগ্রেশন; 2-শ্রেণির শ্রেণিবিন্যাসের জন্য এটি আসলে এলডিএর সমতুল্য)। আপনি কি জানেন যে হিন্জ ক্ষয়কে হ্রাস করা যদি অন্য কিছু সম্ভাবনা সর্বাধিক করার সাথে মিলে যায়? অর্থাৎ কবজ ক্ষতির সাথে সম্পর্কিত কি কোনও সম্ভাব্য মডেল রয়েছে?
অ্যামিবা 15:51-এ মনিকা

1
@ অ্যামিবা এটি একটি আকর্ষণীয় প্রশ্ন, তবে এসভিএমগুলি সহজাতভাবে পরিসংখ্যানগত মডেলিংয়ের ভিত্তিতে নয়। এটি বলার পরে, এই উত্তরটি গ্লেন_বি দ্বারা পরীক্ষা করুন । পুরো থ্রেডটি এটি সম্পর্কে, তবে পরিবর্তে এপিসিলন-সংবেদনশীল কব্জাগুলির জন্য।
ফায়ারব্যাগ

4

@ ফায়ারবাগের একটি ভাল উত্তর ছিল (+1)। আসলে, আমি এখানে একটি অনুরূপ প্রশ্ন ছিল।

শ্রেণিবিন্যাসে প্রায় 0-1 টি ক্ষতিতে বিভিন্ন লোকসান ফাংশনগুলি বেছে নেওয়ার প্রভাবগুলি কী

আমি কেবল লজিস্টিক ক্ষতির আরও বড় সুবিধাগুলিতে আরও যুক্ত করতে চাই: সম্ভাব্য ব্যাখ্যা। একটি উদাহরণ, এখানে পাওয়া যাবে

বিশেষত, লজিস্টিক রিগ্রেশন পরিসংখ্যান সাহিত্যের একটি ধ্রুপদী মডেল। (দেখুন, নামকরণের জন্য "লজিস্টিক রিগ্রেশন" নামটি কী বোঝায়? ) লজিস্টিক ক্ষতির সাথে সম্পর্কিত অনেকগুলি গুরুত্বপূর্ণ ধারণা রয়েছে যেমন লগের সম্ভাবনা প্রাক্কলন, সম্ভাবনা অনুপাতের পরীক্ষা এবং সেইসাথে দ্বিপদী সম্পর্কে অনুমানগুলি। এখানে কিছু সম্পর্কিত আলোচনা করা হল।

আর-তে সম্ভাবনা অনুপাতের পরীক্ষা test

কেন লজিস্টিক রিগ্রেশনকে লজিস্টিক শ্রেণিবিন্যাস বলা হয় না?

লজিস্টিক রিগ্রেশন সম্পর্কে আইড ধারণা আছে?

লগইট এবং প্রবিট মডেলগুলির মধ্যে পার্থক্য


1

যেহেতু @ hxd1011 ক্রস এনট্রপির একটি সুবিধা যুক্ত করেছে, আমি এর একটি অপূর্ণতা যুক্ত করব।

সম্ভাব্যতা বিতরণের মধ্যে ক্রস এনট্রপি ত্রুটি অনেক দূরত্বের ব্যবস্থাগুলির মধ্যে একটি, তবে এর একটি অসুবিধা হ'ল লম্বা লেজযুক্ত বিতরণগুলি সম্ভাব্য ইভেন্টগুলিতে দেওয়া খুব বেশি ওজনের সাথে খারাপভাবে মডেল করা যায়।

আমাদের সাইট ব্যবহার করে, আপনি স্বীকার করেছেন যে আপনি আমাদের কুকি নীতি এবং গোপনীয়তা নীতিটি পড়েছেন এবং বুঝতে পেরেছেন ।
Licensed under cc by-sa 3.0 with attribution required.