পরিসংখ্যান এবং বড় তথ্য

আমি সম্প্রতি এই নিবন্ধটি একটি পৃথক সম্ভাব্যতা বিতরণের এনট্রপিতে পড়েছি । এটি আপনার ব্যবহার শব্দের সম্ভাব্যতা বন্টনের কারণে আপনার এনকোডিংটি অনুকূল হওয়ার সময় কোনও বার্তা এনকোড করার জন্য প্রত্যাশিত সংখ্যা বিটগুলি (কমপক্ষে আপনার এনট্রপি সংজ্ঞাতে ব্যবহার করার সময় ) এনট্রপির বিষয়ে চিন্তা করার একটি দুর্দান্ত উপায় বর্ণনা করে ।লগ2log2\log_2 যাইহোক, …

15 entropy  information-theory 

আমি নির্ভুলতা প্রত্যাহার বক্ররেখা বোঝার চেষ্টা করছি, আমি বুঝতে পারি যথার্থতা এবং পুনরুদ্ধার কী তবে আমি যে জিনিসটি বুঝতে পারি না তা হ'ল "বেসলাইন" মান। আমি এই লিঙ্কটি পড়ছিলাম https://classeval.wordpress.com/intr پيداوار/ intr پيداوار- to- the- precision- recall- plot/ এবং "একটি নিখুঁত শ্রেণিবদ্ধীর একটি যথার্থ-পুনরুদ্ধার বক্ররেখায়" দেখানো বেসলাইন অংশটি আমি বুঝতে …

15 r  machine-learning  classification  precision-recall 

শক্তিবৃদ্ধি শিক্ষা: একটি ভূমিকা। দ্বিতীয় সংস্করণ, চলছে ,, রিচার্ড এস সাটন এবং অ্যান্ড্রু জি বার্তো (সি) 2012, পৃষ্ঠা 67-68। একটি শক্তিবৃদ্ধি শেখার কাজটি সমাধান করার অর্থ, মোটামুটি, এমন একটি নীতি সন্ধান করা যা দীর্ঘকালীন সময়ে অনেক পুরষ্কার অর্জন করে। সসীম এমডিপিগুলির জন্য, আমরা নীচে সঠিকভাবে একটি সর্বোত্তম নীতি নির্ধারণ করতে …

15 markov-process  reinforcement-learning 

আমার একনোমেট্রিক্সে ফ্রিশ ওয়া প্রপঞ্চটি শেখানোর কথা, যা আমি অধ্যয়ন করি নি। আমি এর পেছনের গণিতগুলি বুঝতে পেরেছি এবং আমি আশা করি যে এই ধারণাটিও "একাধিক লিনিয়ার মডেল থেকে আপনি একটি নির্দিষ্ট সহগের জন্য যে সহগ অর্জন করবেন আপনি যদি" ​​অন্য রেজিস্ট্রারদের প্রভাব "বাদ দেন তবে সাধারণ রিগ্রেশন মডেলের সহগের …

15 regression  econometrics  least-squares  projection  decomposition 

আমি একটি ডেটাসেটে অনুসন্ধানের তথ্য বিশ্লেষণ (ইডিএ) করছি। তারপরে আমি নির্ভরশীল ভেরিয়েবলের পূর্বাভাস দেওয়ার জন্য কয়েকটি বৈশিষ্ট্য নির্বাচন করব। প্রশ্নটি হল: আমি কি আমার প্রশিক্ষণ ডেটাসেটের জন্য ইডিএ করব? বা আমি কি প্রশিক্ষণ এবং টেস্ট ডেটাসেটগুলিতে একসাথে যোগদান করতে পারি তবে তাদের উভয়ের বিষয়ে ইডিএ করা এবং এই বিশ্লেষণের ভিত্তিতে …

15 dataset  feature-selection  feature-construction  eda 

আমি মেশিন লার্নিং অ্যালগরিদম ব্যবহার করে প্রায় 10,000 টি ক্ষেত্রে পুনরাবৃত্ত (10 বার) স্তরযুক্ত 10-গুণ ক্রস বৈধতা ব্যবহার করার পরিকল্পনা করছি। প্রতিবার পুনরাবৃত্তি বিভিন্ন এলোমেলো বীজের সাথে করা হবে। এই প্রক্রিয়াটিতে আমি প্রতিটি মামলার সম্ভাব্যতা অনুমানের 10 টি উদাহরণ তৈরি করি। 10-ভাঁজ ক্রস বৈধতার 10 পুনরাবৃত্তির প্রত্যেকটির জন্য সম্ভাব্যতা অনুমানের …

15 roc 

আমি সর্বদা প্রাসঙ্গিক পরামিতি সমস্যার প্রকৃত সারাংশ পেতে সংগ্রাম করি। আমি বেশ কয়েকটি অনুষ্ঠানে পড়েছি যে ননলাইনার প্যানেল ডেটা মডেলগুলির স্থির প্রতিক্রিয়াগুলির অনুমানকারীগুলি "সুপরিচিত" ঘটনামূলক প্যারামিটার সমস্যার কারণে মারাত্মক পক্ষপাতমূলক হতে পারে। যখন আমি এই সমস্যার স্পষ্ট ব্যাখ্যা জিজ্ঞাসা করি তখন সাধারণ উত্তরটি হ'ল: ধরে নিন যে প্যানেল ডেটাতে টি …

15 nonlinear-regression  fixed-effects-model  bias 

কেউ দয়া করে আমাকে কীভাবে ব্যাচ পদ্ধতিটি ব্যবহার করে নিউরাল নেটওয়ার্ক তৈরি করার কথা বলছেন? আমি পড়েছি, প্রশিক্ষণ সংস্থার সমস্ত নমুনার জন্য, ব্যাচ মোডে, আমরা ত্রুটিটি গণনা করি, ডেল্টা এবং সুতরাং নেটওয়ার্কের প্রতিটি নিউরনের জন্য ডেল্টা ওজন এবং তারপরে অবিলম্বে ওজনগুলি আপডেট করার পরিবর্তে, আমরা সেগুলি জমা করি এবং তারপরে …

15 machine-learning  neural-networks 

আমি র‌্যাঙ্কিং অ্যালগরিদমগুলির জন্য বিভিন্ন আলাদা মেট্রিকগুলি দেখতে আগ্রহী - লার্নিং টু র‌্যাঙ্ক উইকিপিডিয়া পৃষ্ঠায় কয়েকটি তালিকাভুক্ত রয়েছে: Average গড় গড় নির্ভুলতা (এমএপি); • ডিসিজি এবং এনডিসিজি; Ision যথার্থতা @ এন, এনডিসিজি @ এন, যেখানে "@n" বোঝায় যে মেট্রিকগুলি কেবল শীর্ষ এন ডকুমেন্টগুলিতে মূল্যায়ন করা হয়; Rec পারস্পরিক রেঙ্ক অর্থ; …

15 algorithms  ranking 

মনে করুন আমাদের কাছে ওয়াই এবং ভবিষ্যদ্বাণীকারী এক্স 1, ...., এক্সএন রয়েছে। যদি আমরা এক্স 1, ...., এক্সএন এর লিনিয়ার মডেলের মাধ্যমে ওয়াইয়ের সাথে ফিট করার চেষ্টা করি এবং ঠিক তখনই ঘটেছিল যে ওয়াই এবং এক্স 1 এর মধ্যে সত্যিকারের সম্পর্ক, ..., এক্সএন লিনিয়ার ছিল না, আমরা সম্ভবত সক্ষম হব …

15 machine-learning  random-forest 

আমি মার্ক ভ্যান ডার লানের কিছু কাগজপত্র বোঝার চেষ্টা করছি। তিনি বার্কলেতে একজন তাত্ত্বিক পরিসংখ্যানবিদ যিনি মেশিন লার্নিংয়ের সাথে উল্লেখযোগ্যভাবে ওভারল্যাপ সমস্যা নিয়ে কাজ করছেন। আমার (গভীর গণিতের পাশাপাশি) একটি সমস্যা হ'ল তিনি প্রায়শই সম্পূর্ণ ভিন্ন পরিভাষা ব্যবহার করে পরিচিত মেশিন লার্নিং পদ্ধতির বর্ণনা দিয়ে শেষ করেন। তার অন্যতম প্রধান …

15 mathematical-statistics  estimation  nonparametric  autocorrelation  censoring 

আমি চিত্রের শ্রেণিবিন্যাসে একটি বৈজ্ঞানিক কাগজ পড়ছি। পরীক্ষামূলক ফলাফলগুলিতে তারা শীর্ষ -1 এবং শীর্ষ -5 নির্ভুলতার কথা বলে তবে আমি এই শব্দটি কখনও শুনিনি, গুগল ব্যবহার করে এটি খুঁজে পাচ্ছি না। কেউ আমাকে একটি সংজ্ঞা দিতে পারে বা কোথাও আমাকে নির্দেশ করতে পারে? :)

15 machine-learning 

এই ডেটা ব্যবহার করে: head(USArrests) nrow(USArrests) আমি এইভাবে একটি পিসিএ করতে পারি: plot(USArrests) otherPCA <- princomp(USArrests) আমি নতুন উপাদান পেতে পারেন otherPCA$scores এবং উপাদানগুলির সাথে ব্যাখ্যা করে বৈকল্পিকের অনুপাত summary(otherPCA) তবে যদি আমি জানতে চাই যে কোন ভেরিয়েবলগুলি মূলত কোন প্রধান উপাদান দ্বারা ব্যাখ্যা করা হয়? এবং তদ্বিপরীত: যেমন পিসি …

15 r  pca  dimensionality-reduction  regression-strategies 

তাই আমি তেল ফেরতের এসিএফ / পিএসিএফ ষড়যন্ত্র করেছিলাম এবং কিছু ইতিবাচক স্বতঃসংশোধন দেখার প্রত্যাশা করছিলাম কিন্তু অবাক হওয়ার সাথে সাথে আমি কেবল নেতিবাচক উল্লেখযোগ্য স্বতঃসংশোধন পাই। উপরের গ্রাফটি কীভাবে ব্যাখ্যা করব? তারা ইঙ্গিত করে বলে মনে হয় যে তেল ফিরে আসার প্রবণতা বাড়তে থাকে যখন এটি আগের এবং তদ্বিপরীত …

15 time-series 

বলুন যে আমার কাছে এন-ডাইমেনশনাল ক্রমাগত-মূল্যবান ভেক্টরগুলির দুটি বা ততোধিক নমুনা জনসংখ্যা রয়েছে। এই নমুনাগুলি একই বিতরণ থেকে হয় কিনা তা পরীক্ষা করার কোন ননপ্যারমেট্রিক উপায় আছে? যদি তা হয় তবে এর জন্য আর বা অজগরটিতে কোনও ফাংশন রয়েছে?

15 r  distributions  nonparametric  python