পরিসংখ্যান এবং বড় তথ্য

আমি দুটি নমুনার মধ্যে মিলের পরিমাপ হিসাবে আর-তে দুটি কার্নেল ঘনত্বের অনুমানের মধ্যে ওভারল্যাপের ক্ষেত্রটি গণনা করার জন্য একটি পদ্ধতি খুঁজছি। স্পষ্ট করার জন্য, নিম্নলিখিত উদাহরণে, আমাকে বেগুনি ওভারল্যাপিং অঞ্চলের ক্ষেত্রফলের পরিমাণটি নির্ধারণ করতে হবে: library(ggplot2) set.seed(1234) d <- data.frame(variable=c(rep("a", 50), rep("b", 30)), value=c(rnorm(50), runif(30, 0, 3))) ggplot(d, aes(value, fill=variable)) …

14 r  probability  pdf  kernel-smoothing 

আমি পড়েছি আবদি (2003) মধ্যে যে যখন স্বাধীন ভেরিয়েবলগুলি যুগলভাবে অর্থোগোনাল হয়, তখন এই স্বতন্ত্র পরিবর্তনশীল এবং নির্ভরশীল ভেরিয়েবলের মধ্যে রিগ্রেশনের ofাল গণনা করে রিগ্রেশনটিতে তাদের প্রতিটিটির প্রভাব নির্ণয় করা হয়। এই ক্ষেত্রে, (অর্থাত্ IV এর অর্থগোনালিটি), আংশিক রিগ্রেশন সহগগুলি রিগ্রেশন সহগের সমান। অন্যান্য সমস্ত ক্ষেত্রে, আধিপত্য সহগ আংশিক রিগ্রেশন …

14 regression  multiple-regression  regression-coefficients  terminology 

একটি প্রাসঙ্গিক-দস্যু সমস্যা সমাধানের জন্য আমি স্বরযুক্ত ওয়াবিট ব্যবহার করছি । আমি ব্যবহারকারীদের বিজ্ঞাপন প্রদর্শন করছি, এবং বিজ্ঞাপনটি যে প্রসঙ্গে দেখানো হয়েছে (যেমন ব্যবহারকারী ব্যবহারকারী, তারা কোন সাইটে আছেন ইত্যাদি) সম্পর্কে আমার কাছে যথেষ্ট তথ্য রয়েছে। জন ল্যাংফোর্ডের বর্ণনা অনুসারে এটি একটি দুর্দান্ত ক্লাসিক প্রাসঙ্গিক দস্যু সমস্যা বলে মনে হচ্ছে …

14 multinomial  gradient-descent  multiarmed-bandit  vowpal-wabbit  contextual-bandit 

আমি এখানে বিভিন্ন থ্রেড ব্রাউজ করছি, তবে আমার সঠিক প্রশ্নের উত্তর দেওয়া হয়েছে বলে আমি মনে করি না। আমার কাছে ~ 50,000 শিক্ষার্থীর একটি ডেটাসেট এবং ড্রপ আউট করার সময়। আমি প্রচুর সংখ্যক সম্ভাব্য কোভেরিয়েটদের সাথে আনুপাতিক বিপদ সংক্ষিপ্তকরণ সম্পাদন করতে যাচ্ছি। আমি ড্রপআউট / থাকার বিষয়ে লজিস্টিক রিগ্রেশনও করতে …

14 cross-validation  survival  train 

সেরা ওপেন সোর্স ডেটা ভিজুয়ালাইজেশন সফ্টওয়্যারটি কী? আমার নিম্নলিখিতগুলি প্রয়োজন: মাইক্রোসফ্ট এক্সেল থেকে ডেটা আমদানি করতে পারে (ওরাকল ডাটাবেসগুলি থেকে ডেটা আমদানিও ভাল হবে তবে এটি বাধ্যতামূলক নয়)। সফ্টওয়্যার দ্বারা উত্পাদিত চার্টগুলি মাইক্রোসফ্ট পাওয়ারপয়েন্টে রফতানি করা যায় (কপি এবং পেস্ট আমার সাথে ঠিক আছে)। মুক্ত উত্স এবং ব্যবহারে সহজ to

14 data-visualization  excel  software  open-source 

তথ্য বিশ্লেষণ করার সময় নিম্নলিখিত সমস্যাটি সম্প্রতি উপস্থিত হয়েছিল। দৈব চলক X- একটি স্বাভাবিক বন্টন নিম্নরূপ এবং Y একটি অনুসরণ করে তাহলে χ2nχn2\chi^2_n (ডেপথ অফ ফিল্ড এন সঙ্গে) বন্টন, কেমন Z=X2+Y2Z=X2+Y2Z = X^2 + Y^2 বিতরণ? এখন অবধি আমি Y2Y2Y^2 : ψ 2 n ( x ) এর পিডিএফ নিয়ে …

14 probability  distributions  normal-distribution  chi-squared  convolution 

আমার পরীক্ষার ডেটা রয়েছে যেখানে আমার কাছে বিচ্ছিন্ন বিতরণগুলির থেকে বেশ কয়েকটি বড় নমুনা রয়েছে যা আমি অভিজ্ঞতাजनী বিতরণ হিসাবে ব্যবহার করছি। আমি পরীক্ষা করতে চাই যে বিতরণগুলি আসলে আলাদা কিনা এবং সেই ডিস্ট্রিবিউশনগুলি যা আসলে আলাদা আলাদা তার জন্য তারতম্যের অর্থ কি। যেহেতু এগুলি বিবিধ বিতরণ তাই আমার বোধগম্যতা …

14 chi-squared  kolmogorov-smirnov 

আর এর পূর্বাভাস প্যাকেজে এআইসি থেকে এআইসিসি তে ডিফল্ট মডেল নির্বাচন পরিসংখ্যানের সাম্প্রতিক পরিবর্তনের দ্বারা অনুপ্রাণিত হয়ে, আমি আগ্রহী যে পূর্ববর্তী যেখানেই থাকুক না কেন সত্যই এটি প্রযোজ্য কিনা। আমার এই শ্রদ্ধার সাথে ধারাবাহিক প্রশ্ন রয়েছে এবং এখানে প্রথমটি রয়েছে। আমি জানি যে এআইসিকে সর্বত্র এআইসির সাথে প্রতিস্থাপন করা হ'ল …

14 model-selection  references  aic 

কুপন সংগ্রহকারীর সমস্যার পরিবর্তনে আপনি কুপনের সংখ্যা জানেন না এবং এটি অবশ্যই ডেটা ভিত্তিক নির্ধারণ করতে হবে। আমি এটিকে ভাগ্য কুকির সমস্যা হিসাবে উল্লেখ করব: অজানা সংখ্যক স্বতন্ত্র ভাগ্য কুকি বার্তাগুলি দেওয়া এনএনn , অনুমান এনএনn একবারে একবারে নমুনা দিয়ে এবং প্রতিটি ভাগ্য কতবার উপস্থিত হয় তা গণনা করে। এছাড়াও …

14 estimation  coupon-collector-problem 

থেকে উইকিপিডিয়া , Spearman র্যাঙ্ক পারস্পরিক সম্পর্ক রূপান্তর ভেরিয়েবল দ্বারা গণনা করা হয় XiXiX_i এবং YiYiY_i তম স্থান ভেরিয়েবল মধ্যে xixix_i এবং yiyiy_i , এবং তারপর মধ্যে ভেরিয়েবল তম স্থান পিয়ারসন এর পারস্পরিক সম্পর্ক গণক: তবে নিবন্ধটি আরও জানায় যে XiXiX_i এবং ভেরিয়েবলের মধ্যে কোনও সম্পর্ক YiYiY_iনা থাকলে উপরের সূত্রটি …

14 correlation  proof  spearman-rho 

আমি বর্তমানে কিছু কাজ পর্যালোচনা করছি এবং নিম্নলিখিতটি এসেছি যা আমার কাছে ভুল বলে মনে হচ্ছে। দুটি মিশ্র মডেল লাগানো হয়েছে (র মধ্যে) ল্যামার ব্যবহার করে। মডেলগুলি নির্বিঘ্নযুক্ত এবং সম্ভাবনা-অনুপাত পরীক্ষার সাথে তুলনা করা হয়। সংক্ষেপে, আমার যা আছে তার একটি পুনরুত্পাদনযোগ্য উদাহরণ: set.seed(105) Resp = rnorm(100) A = factor(rep(1:5,each=20)) …

14 r  lme4-nlme  likelihood-ratio  nested-models 

আত্মবিশ্বাসের বিরতিতে উইকিপিডিয়া পৃষ্ঠা থেকে : ... যদি পুনরাবৃত্ত (এবং সম্ভবত পৃথক) বিভিন্ন পরীক্ষার পৃথক পৃথক ডেটা বিশ্লেষণ জুড়ে আত্মবিশ্বাসের ব্যবধানগুলি তৈরি করা হয়, তবে প্যারামিটারের সত্যিকারের মান রয়েছে এমন বিরতিগুলির অনুপাত আত্মবিশ্বাসের স্তরের সাথে মেলে ... এবং একই পৃষ্ঠা থেকে: একটি আত্মবিশ্বাসের ব্যবধানটি ভবিষ্যদ্বাণী করে না যে প্যারামিটারের সত্যিকারের …

14 bayesian  confidence-interval 

আমি 6 টি বিভাগের মধ্যে বৈষম্য র্যান্ডম ফরেস্টের সাথে একটি শ্রেণিবদ্ধকরণ মডেলকে প্রশিক্ষণ দিচ্ছি। আমার লেনদেনের ডেটাতে প্রায় 60k + পর্যবেক্ষণ এবং 35 ভেরিয়েবল রয়েছে। এটি প্রায় দেখতে কেমন লাগে তার একটি উদাহরণ এখানে। _________________________________________________ |user_id|acquisition_date|x_var_1|x_var_2| y_vay | |-------|----------------|-------|-------|--------| |111 | 2013-04-01 | 12 | US | group1 | |222 …

14 r  machine-learning  classification  random-forest 

আমি জানি এটি পরিসংখ্যানগতভাবে কিছুটা দড়ি হতে পারে তবে এটি আমার সমস্যা। আমার কাছে প্রচুর পরিসীমা তথ্য রয়েছে, এটি একটি ভেরিয়েবলের ন্যূনতম, সর্বাধিক এবং নমুনার আকার বলতে say এই ডেটা কিছু জন্য আমি একটি গড় আছে, কিন্তু অনেক না। প্রতিটি পরিসরের পরিবর্তনের পরিমাণ নির্ধারণের জন্য এবং উপায়গুলির সাথে তুলনা করতে …

14 r  normal-distribution  estimation  missing-data  order-statistics 

আমার কাছে 100 টি পয়েন্টের নমুনা রয়েছে যা ধারাবাহিক এবং এক-মাত্রিক। আমি কার্নেল পদ্ধতি ব্যবহার করে এর অ-প্যারাম্যাট্রিক ঘনত্ব অনুমান করেছি। এই আনুমানিক বিতরণ থেকে আমি কীভাবে এলোমেলো নমুনা আঁকতে পারি?

14 r  sampling  kernel-smoothing