পরিসংখ্যান এবং বড় তথ্য

কেমেস ব্যবহার করে গুচ্ছবদ্ধ হওয়া কি যথাযথ কিনা তা নির্ধারণ করার জন্য কি কেউ একটি ভাল পদ্ধতি জানেন? অর্থাত্ যদি আপনার নমুনাটি বাস্তবে সমজাতীয় হয় তবে কী হবে? আমি জানি মিশ্রণ মডেলের মতো কিছু (আরআর এমক্লাস্টের মাধ্যমে) 1: কে ক্লাস্টারের ক্ষেত্রে উপযুক্ত পরিসংখ্যান সরবরাহ করবে, তবে মনে হয় কমিয়ানদের মূল্যায়নের …

9 r  clustering  k-means 

আমার কাছে এমন কিছু ডেটা রয়েছে যা আমি সাধারণ বিতরণ থেকে আঁকার জন্য অগত্যা ধরে নিতে পারি না এবং আমি গ্রুপগুলির মধ্যে সমতার টেস্ট পরিচালনা করতে চাই। সাধারণ তথ্যের জন্য, টোস্টের মতো কৌশল রয়েছে (দুটি একতরফা টি-টেস্ট)। নরমাল ডেটার জন্য টোস্টের সাথে সদৃশ কিছু আছে কি?

9 hypothesis-testing  equivalence  tost 

আমার কাছে একটি রিগ্রেশন মডেল রয়েছে যা দেখতে দেখতে:Y=β0+β1X1+β2X2+β3X3+β12X1X2+β13X1X3+β123X1X2X3Y=β0+β1X1+β2X2+β3X3+β12X1X2+β13X1X3+β123X1X2X3Y = \beta_0+\beta_1X_1 + \beta_2X_2 + \beta_3X_3 +\beta_{12}X_1X_2+\beta_{13}X_1X_3+\beta_{123}X_1X_2X_3 ... বা আর সংকেত: y ~ x1 + x2 + x3 + x1:x2 + x1:x3 + x1:x2:x3 ধরা যাক এবং শ্রেণীবদ্ধ ভেরিয়েবল এবং সংখ্যাসূচক। হ'ল এর তিনটি স্তর রয়েছে এবং মান বিপরীতে পরিবর্তনের পরিবর্তে, …

9 r  contrasts 

সাম্প্রতিক একটি প্রশ্ন , সম্পর্কিত প্রশ্ন এবং উত্সিত উত্স , সম্প্রতি আমাকে সচেতন করেছে যে জনসংখ্যার বৈকল্পিকের নমুনা অনুমানের জন্য সংশোধনকে বেসেলের সংশোধন হিসাবে উল্লেখ করা হয় । বেসেল 1846 ( উইকিপিডিয়া উদ্ধৃতি ) দ্বারা মারা গিয়েছিলেন এবং টি-টেস্টটি 1908 সালে প্রকাশিত হয়েছিল ( উইকিপিডিয়া উদ্ধৃতি )। কোনও কারণে, আমি …

9 distributions  t-test  history 

কেউ দয়া করে পরামর্শ দিতে পারেন যে আমি কীভাবে দুটি গাউসিয়ান এলোমেলো ভেক্টরের অভ্যন্তরীণ উত্পাদনের মুহুর্ত তৈরির ফাংশনটি গণনা করতে পারি, একে অপরকে আলাদা করে হিসাবে বিতরণ করা হয় ? এর জন্য কি কিছু মানক ফলাফল পাওয়া যায়? যে কোনও পয়েন্টার অত্যন্ত প্রশংসা করা হয়।N(0,σ2)N(0,σ2)\mathcal N(0,\sigma^2)

9 normal-distribution  mathematical-statistics  multivariate-analysis  moments  mgf 

আমি প্রথম নাম, শেষ নাম এবং জন্ম বছর দ্বারা 2 ডেটাसेट জুড়ে রেকর্ডগুলি লিঙ্ক করতে আগ্রহী। EM অ্যালগরিদমের সাথে এটি কি করণীয় হতে পারে, এবং যদি তা হয় তবে কীভাবে? উদাহরণ হিসাবে প্রথমটিতে রেকর্ডটি বিবেচনা করুন: কার্ল ম্যাকার্থি, 1967। আমি ২ য় ডাটা্যাসেটে সমস্ত রেকর্ড অনুসন্ধান করব এবং 1 ম …

9 machine-learning  stata  expectation-maximization  record-linkage  perl 

ড্যানিয়েল কাহ্নেমানের "চিন্তাভাবনা, দ্রুত এবং ধীর" এর "রিগ্রেশন টু দ্য মিড" অধ্যায়টিতে একটি উদাহরণ দেওয়া হয়েছে এবং পাঠককে সামগ্রিক বিক্রয় পূর্বাভাস এবং পূর্ববর্তী বছরের বিক্রয় সংখ্যা প্রদত্ত পৃথক স্টোরের বিক্রয় পূর্বাভাস দিতে বলা হয়েছে । উদাহরণস্বরূপ (বইয়ের উদাহরণে 4 টি স্টোর রয়েছে, আমি সরলতার জন্য এখানে 2 ব্যবহার করি): Store …

9 regression 

ফক্স এবং ওয়েজবার্গ নোট "প্রয়োগিত প্রতিরোধের সাথে একজন আর সহযোগী" এর 232 পৃষ্ঠায় কেবল গাউসীয় পরিবারেই ধ্রুব বৈকল্পিকতা রয়েছে এবং অন্যান্য সমস্ত জিএলএমগুলিতে y at এর শর্তাধীন বৈকল্পিক উপর নির্ভর করেxx\bf{x}μ(x)μ(x)\mu(x) এর আগে তারা লক্ষ করুন যে, পইসন এর শর্তাধীন ভ্যারিয়েন্স হয় এবং দ্বিপদ এর যে ।μμ\muμ(1−μ)Nμ(1−μ)N\frac{\mu(1-\mu)}{N} গাউশিয়ানদের কাছে এটি …

9 logistic  generalized-linear-model 

আমার সংস্থায় করা পূর্বাভাসের সহায়তা হিসাবে আমি একটি ইন্টারেক্টিভ পূর্বাভাস সরঞ্জাম তৈরি করছি (পাইথনে)। আজ অবধি পূর্বাভাস প্রক্রিয়াটি মূলত মানব চালিত হয়েছে, পূর্বাভাসকারীরা তাদের প্রাকৃতিক নিউরাল নেটওয়ার্কগুলিতে ডেটা একত্রিত করে এবং তাদের শিখে থাকা অন্ত্রকে ভবিষ্যদ্বাণী করতে অনুভব করে। একটি দীর্ঘমেয়াদী পূর্বাভাস যাচাইকরণ এবং ভবিষ্যদ্বাণীপূর্ণ মডেলিং অধ্যয়ন থেকে আমি করেছি …

9 data-visualization  communication 

বক্সপ্লটের হুইস্কারগুলির ব্যাখ্যা সম্পর্কে আমার একটি প্রশ্ন আছে। আমি নিম্নলিখিতটি পড়েছি: "আয়তক্ষেত্রের উপরে এবং নীচে," ফিসফিসারগুলি "0.25- এবং 0.75-কোয়ান্টাইলের মধ্যে 1.5 গুন দূরত্বের পরিসীমা দেখায়, তবে" দূরত্ব "বলতে কী বোঝায় তা পুরোপুরি বুঝতে পারি না । এটি হতে পারে না যে সম্ভাবনা ভর বোঝানো হয়, যেহেতু 0.25 এবং 0.75 কোয়ান্টাইলের …

9 data-visualization  boxplot 

আমি লজিস্টিক রিগ্রেশনটির জন্য কিছু পরীক্ষার ডেটা তৈরি করার চেষ্টা করছিলাম এবং আমি এই পোস্টটি খুঁজে পেলাম যে কীভাবে লজিস্টিক রিগ্রেশন জন্য কৃত্রিম ডেটা সিমুলেট করা যায় ? এটি একটি দুর্দান্ত উত্তর তবে এটি কেবল ক্রমাগত পরিবর্তনশীল তৈরি করে। লিঙ্কের মতো একই উদাহরণের জন্য y এর সাথে 5 স্তরের (ABCDE) …

9 r  logistic  simulation 

অধ্যয়নের জন্য সেরা বইগুলির মধ্যে কয়েকটি কী) একটি স্থানিক ডোমেন জুড়ে ইউনিভারিটি এবং মাল্টিভারিয়েট ভেরিয়েবলের আসল (বাস্তব, গণনা ডেটা) ability ii) স্থানিক অবস্থানগুলি জুড়ে বিতরণের উপর ভিত্তি করে একটি অবিচ্ছিন্ন বা বহুবিধ পরিবর্তনশীল নমুনা। (সংক্ষেপে স্থানিক নমুনা)

9 sampling  mathematical-statistics  references  spatial 

যখন ভেক্টর মেশিনগুলির সমর্থন করার কথা আসে তখন আমি একজন শিক্ষানবিস। কিছু নির্দেশিকা রয়েছে যা বলছে যে কোনও কার্নেল (যেমন লিনিয়ার, বহুপদী) একটি নির্দিষ্ট সমস্যার জন্য সবচেয়ে উপযুক্ত? আমার ক্ষেত্রে, ওয়েবপৃষ্ঠাগুলিতে তাদের নির্দিষ্ট কিছু তথ্য রয়েছে কিনা তা অনুসারে শ্রেণিবদ্ধ করতে হবে, অর্থাৎ আমার বাইনারি শ্রেণিবদ্ধার সমস্যা আছে। আপনি কি …

9 classification  svm  model-selection  libsvm  kernel-trick 

আমি জানতে চাই যে ম্যাট্রিক্স গুণনের সাহায্যে জ্যাকার্ড সহগের গণনা করার কোনও সম্ভাব্য উপায় আছে কিনা। আমি এই কোডটি ব্যবহার করেছি jaccard_sim <- function(x) { # initialize similarity matrix m <- matrix(NA, nrow=ncol(x),ncol=ncol(x),dimnames=list(colnames(x),colnames(x))) jaccard <- as.data.frame(m) for(i in 1:ncol(x)) { for(j in i:ncol(x)) { jaccard[i,j]= length(which(x[,i] & x[,j])) / length(which(x[,i] …

9 r  matrix  binary-data  association-measure  similarities 

ডেটা ভিজ্যুয়ালাইজেশনের বিষয়ে আমার উপদেষ্টার সাথে আমার তর্ক রয়েছে। তিনি দাবি করেছেন যে পরীক্ষামূলক ফলাফলের প্রতিনিধিত্ব করার সময়, মানগুলি কেবল " চিহ্নিতকারী " দিয়ে প্লট করা উচিত , যেমন চিত্রের নমুনাতে উপস্থাপন করা হয়েছে। যখন বক্ররেখা কেবল একটি " মডেল " উপস্থাপন করে আমি অন্যদিকে বিশ্বাস করি যে পাঠ্যের সহজলভ্যতার …

9 data-visualization  communication