পরিসংখ্যান এবং বড় তথ্য

সহযোগী ফিল্টারিংয়ে, আমাদের মানগুলি পূরণ করা হয় নি। মনে করুন কোনও ব্যবহারকারী কোনও সিনেমা দেখেনি তবে আমাদের সেখানে একটি 'না' রাখতে হবে। আমি যদি এই ম্যাট্রিক্সের একটি এসভিডি নিতে যাচ্ছি, তবে আমাকে সেখানে কিছু নম্বর রাখতে হবে - বলুন 0 এখন এখন আমি যদি ম্যাট্রিক্সকে ফ্যাক্টরিজ করি তবে অনুরূপ ব্যবহারকারীর …

21 machine-learning  svd  recommender-system 

নিম্নলিখিত অংশটি শোয়েজারের হেজ ফান্ড মার্কেট উইজার্ডস (মে ২০১২) এর ধারাবাহিকভাবে সফল হেজ ফান্ডের ব্যবস্থাপক জাফ্রে উড্রিফের একটি সাক্ষাত্কার: এই প্রশ্নের উত্তর: "ডেটা মাইনিংয়ের ক্ষেত্রে লোকেদের মধ্যে সবচেয়ে খারাপ ত্রুটিগুলি কী কী?": প্রচুর লোক মনে করে তারা ঠিক আছে কারণ তারা প্রশিক্ষণের জন্য নমুনা ডেটা এবং পরীক্ষার জন্য নমুনা ছাড়িয়ে …

21 data-mining  curve-fitting  out-of-sample 

আমি ভাবছিলাম যে পি-ভ্যালু, তাত্পর্য স্তর এবং টাইপ আই ত্রুটির সংজ্ঞা এবং ব্যবহারগুলি হিসাবে যদি কেউ সংক্ষিপ্ত রানডাউন দিতে পারে। আমি বুঝতে পেরেছি যে পি-মানগুলি "প্রকৃতপক্ষে আমরা যতটা পর্যবেক্ষণ করেছি তার চেয়ে বেশি হিসাবে একটি পরিসংখ্যানের পরিসংখ্যান প্রাপ্তির সম্ভাবনা" হিসাবে সংজ্ঞায়িত হয়েছে, যখন তাত্পর্য স্তরটি যদি পি-মানটি উল্লেখযোগ্য হয় বা …

21 hypothesis-testing  probability  statistical-significance  p-value  error 

আমার বেশ কয়েকটি মাল্টিভিয়ারেট পর্যবেক্ষণ রয়েছে এবং সমস্ত ভেরিয়েবলের মধ্যে সম্ভাবনার ঘনত্ব মূল্যায়ন করতে চাই। ধারণা করা হয় যে তথ্যগুলি সাধারণত বিতরণ করা হয়। ভেরিয়েবলের স্বল্প সংখ্যায় সবকিছু যেমনটি আমি আশা করি তেমন কাজ করে তবে বৃহত্তর সংখ্যায় চলে যাওয়ার ফলে সমবায় ম্যাট্রিক্স অ ইতিবাচক নিশ্চিত হয়ে যায়। আমি মতলব-এ …

21 normal-distribution  multivariate-analysis  covariance 

আমি কিছু গবেষণা করছি তবে বিশ্লেষণের পর্যায়ে এসেছি (আমার পরিসংখ্যানের বক্তৃতাগুলিতে আরও মনোযোগ দেওয়া উচিত ছিল)। আমি দুটি যুগপত সংকেত সংগ্রহ করেছি: ভলিউম এবং বুকের প্রসারণের পরিবর্তনের জন্য সংহত প্রবাহের হার। আমি সংকেতগুলির তুলনা করতে চাই এবং শেষ পর্যন্ত বুকের সম্প্রসারণ সংকেত থেকে ভলিউম প্রাপ্ত করার আশা করি। তবে প্রথমে …

21 r  time-series  signal-processing  measurement 

আমি সম্প্রতি এমসিএমসি অ্যালগরিদম ব্যবহার করে বায়েশিয়ান কাঠামোয় ফিটিং রিগ্রেশন মিশ্রিত মডেলগুলি শুরু করেছি (আসলে আর সি তে এমসিএমসিজিএমএম ফাংশন)। আমি বিশ্বাস করি যে আমি কীভাবে প্রাক্কলন প্রক্রিয়া (ট্রেস, গিউকে প্লট, স্বতঃসংশোধন, উত্তর বিতরণ ...) রূপান্তরটি সনাক্ত করতে পারি তা বুঝতে পেরেছি। বায়সিয়ান কাঠামোর মধ্যে যে জিনিসটি আমাকে আঘাত করে …

21 r  bayesian  mixed-model  mcmc  residuals 

\newcommand{\P}{\mathbb{P}} ধরুন আমরা আছে NNN স্বাধীন র্যান্ডম ভেরিয়েবল X1X1X_1 , ……\ldots , XnXnX_n সসীম উপায়ে সঙ্গে μ1≤…≤μNμ1≤…≤μN\mu_1 \leq \ldots \leq \mu_N এবং ভেরিয়ানস σ21σ12\sigma_1^2 , ……\ldots , σ2NσN2\sigma_N^2 । আমি যে কোনও এক্স_আই \ নেক এক্স_এনXi≠XNXi≠XNX_i \neq X_N অন্যান্য সমস্ত XjXjX_j , জে নেক আই এর চেয়ে বড় তার সম্ভাব্যতার …

21 probability  bounds  maximum 

আমি প্রায়শই নিজেকে caretআর এর সাহায্যে বিভিন্ন পূর্বাভাসমূলক মডেলগুলির প্রশিক্ষণ দিতে দেখি I'll আমি তাদের সকলকে একই ক্রস বৈধতা ভাঁজগুলিতে প্রশিক্ষণ দেব, ব্যবহার করে caret::: createFolds, পরে ক্রস-বৈধতাযুক্ত ত্রুটির ভিত্তিতে সেরা মডেলটি বেছে নেব । যাইহোক, বেশ কয়েকটি মডেলের মধ্যমা পূর্বাভাস প্রায়শই একটি স্বতন্ত্র পরীক্ষার সেটটিতে সেরা একক মডেলকে ছাড়িয়ে …

21 r  caret  ensemble 

আমি এমন একটি দৃশ্যের মুখোমুখি হয়েছি যেখানে আমার 10 জনের জন্য 10 সংকেত / ব্যক্তি রয়েছে (সুতরাং 100 নমুনা) যাতে 14000 ডেটা পয়েন্ট (মাত্রা) থাকে যা আমার একটি শ্রেণিবদ্ধের কাছে যেতে হবে। আমি এই ডেটার মাত্রিকতা হ্রাস করতে চাই এবং পিসিএ মনে হয় এটি করার উপায়। যাইহোক, আমি কেবলমাত্র পিসিএর …

21 pca  dimensionality-reduction  svd 

আমি ভাবছি যে লিনিয়ার মডেলটিতে আংশিক আর2আর2R^2 এবং সহগগুলির মধ্যে সঠিক সম্পর্কটি কী এবং কারণগুলির গুরুত্ব এবং প্রভাব চিত্রিত করার জন্য আমার কেবল একটি বা উভয় ব্যবহার করা উচিত। আমি যতদূর জানি, summaryসহগের অনুমানের সাথে, এবং anovaপ্রতিটি ফ্যাক্টরের জন্য স্কোয়ারের যোগফলের সাথে - বর্গাকার যোগফলের যোগফলের যোগফলের দ্বারা বিভক্ত একটি …

21 r  regression  multiple-regression  regression-coefficients  r-squared 

এই প্রশ্নটি গণিত স্ট্যাক এক্সচেঞ্জ থেকে স্থানান্তরিত হয়েছিল কারণ ক্রস ভ্যালিডেটে উত্তর দেওয়া যেতে পারে। 7 বছর আগে স্থানান্তরিত । আমি এখনই রিগ্রেশন বিশ্লেষণ এবং বৈকল্পিক বিশ্লেষণ সম্পর্কে শিখছি। রিগ্রেশন বিশ্লেষণে আপনার একটি ভেরিয়েবল স্থির রয়েছে এবং আপনি জানতে চান যে অন্যান্য ভেরিয়েবলের সাথে ভেরিয়েবল কীভাবে চলে। বৈকল্পিক বিশ্লেষণে আপনি …

21 regression 

তাদের পাঠ্যপুস্তকে গ্রাফিকাল মডেলস, এক্সফোনেনশিয়াল ফ্যামিলি এবং ভেরিয়েশনাল ইনফারেন্স , এম জর্ডান এবং এম ওয়েনউইট এক্সফেনশনাল পরিবার এবং মার্কভ র্যান্ডম ফিল্ডস (অপরিবর্তিত গ্রাফিকাল মডেল) এর মধ্যে সংযোগ নিয়ে আলোচনা করেছেন । আমি নিম্নলিখিত প্রশ্নের সাথে তাদের মধ্যে সম্পর্ক আরও ভালভাবে বোঝার চেষ্টা করছি: সমস্ত এমআরএফগুলি কী তাত্পর্যপূর্ণ পরিবারের সদস্য? ক্ষতিকারক …

21 mathematical-statistics  graphical-model 

এসপিএসএস স্বতন্ত্র গ্রুপ টি-পরীক্ষার পদ্ধতিতে ভিন্নতার এককতার মূল্যায়ন করতে লেভেন পরীক্ষা ব্যবহার করে। লেভেন পরীক্ষা দুটি গ্রুপের বৈকল্পের অনুপাতের একটি সাধারণ এফ অনুপাতের চেয়ে কেন ভাল?

21 hypothesis-testing  anova  variance  t-test  heteroscedasticity 

মনে করুন আপনি প্রতিদিন কোটি কোটি পর্যবেক্ষণের ভিত্তিতে একটি বিশাল ডেটা সেট বিশ্লেষণ করছেন, যেখানে প্রতিটি পর্যবেক্ষণে কয়েক হাজার বিচ্ছিন্ন এবং সম্ভবত অপ্রয়োজনীয় সংখ্যাসূচক এবং শ্রেণিবদ্ধ ভেরিয়েবল রয়েছে। আসুন আমরা বলি যে একটি রিগ্রেশন সমস্যা, একটি ভারসাম্যহীন বাইনারি শ্রেণিবদ্ধকরণ সমস্যা এবং "কোন ভবিষ্যদ্বাণীকারী সবচেয়ে গুরুত্বপূর্ণ তা খুঁজে বের করুন" এর …

21 r  machine-learning  data-mining  large-data 

আমি জন ক্রুশকের " ডুয়িং বায়েসিয়ান ডেটা অ্যানালাইসিস" স্লাইডগুলি পড়ছি , তবে আসলে টি-টেস্টগুলি এবং / অথবা সম্পূর্ণ নাল-হাইপোথিসিসের তাত্পর্য পরীক্ষার কাঠামোর ব্যাখ্যা সম্পর্কে একটি প্রশ্ন আছে। তিনি যুক্তি দিয়েছিলেন যে পি-মানগুলি সংজ্ঞায়িত কারণ তারা তদন্তকারীর উদ্দেশ্যগুলির উপর নির্ভর করে। বিশেষত, তিনি দুটি ল্যাবগুলির একটি উদাহরণ (পৃষ্ঠা 3-6) দেন যা …

21 hypothesis-testing