পরিসংখ্যান এবং বড় তথ্য

আমি জেফ কামিংয়ের ২০০৮-এর পেপারের প্রতিলিপি এবং অন্তরগুলিপিppপিpp পি পি পড়ছি : মানগুলি কেবলমাত্র অস্পষ্টভাবে ভবিষ্যতের পূর্বাভাস দেয় তবে আত্মবিশ্বাসের ব্যবধানগুলি আরও ভাল করে তোলে [গুগল স্কলারে ২০০ ডলার উদ্ধৃতি] - এবং এর কেন্দ্রীয় দাবির মধ্যে একটি বিভ্রান্ত হয়ে পড়েছি। এটি কাগজপত্রের সেই সিরিজের একটি যেখানে কমিং মূল্যগুলির বিরুদ্ধে এবং …

52 hypothesis-testing  p-value  power  replicability 

আমি যদি কোনও randomForestমডেল চালনা করি তবে আমি মডেলের উপর ভিত্তি করে ভবিষ্যদ্বাণী করতে পারি। ভবিষ্যদ্বাণীগুলির প্রত্যেকটির অনুমানের ব্যবধান পাওয়ার কোনও উপায় আছে কীভাবে আমি জানি যে মডেলটির উত্তরের বিষয়ে "নিশ্চিত" কি আছে? যদি এটি সম্ভব হয় তবে এটি কেবল পুরো মডেলের জন্য নির্ভরশীল পরিবর্তনশীলের পরিবর্তনের উপর ভিত্তি করে বা …

52 r  confidence-interval  random-forest 

আমি প্রমাণিত এসভিএমগুলিতে যে সমস্ত কাগজপত্র পড়েছি তা হ'ল তাদের প্রতিরোধ / শ্রেণিবিন্যাসের সমস্যার মুখোমুখি হওয়ার জন্য এটি উচ্চতর কৌশল, সচেতন যে তারা এনএনএসের মাধ্যমে অনুরূপ ফলাফল পেতে পারে না। প্রায়শই তুলনা বলছে যে এনভিগুলির পরিবর্তে এসভিএম, একটি শক্তিশালী প্রতিষ্ঠাতা তত্ত্ব আছে চতুর্ভুজ প্রোগ্রামিংয়ের কারণে গ্লোবাল সর্বোত্তম পৌঁছান সঠিক সংখ্যক …

52 machine-learning  svm  neural-networks 

আমি টুকির বই "এক্সপ্লোরার ডেটা অ্যানালাইসিস" পড়ছি। 1977 সালে লিখিত হওয়ার কারণে বইটি কাগজ / পেন্সিল পদ্ধতিগুলিতে জোর দেয়। এমন আরও কোনও 'আধুনিক' উত্তরসূরি রয়েছে যা অ্যাকাউন্টে নেয় যা আমরা এখন তাত্ক্ষণিকভাবে বড় ডেটা সেটগুলি প্লট করতে পারি?

52 data-visualization  references  descriptive-statistics  eda 

ANOVA উইকিপিডিয়ার পৃষ্ঠা তিন অনুমানের তালিকা , যথা: মামলার স্বাতন্ত্র্য - এটি পরিসংখ্যান বিশ্লেষণকে সহজতর করে এমন মডেলের একটি অনুমান। স্বাভাবিকতা - অবশিষ্টাংশের বিতরণ স্বাভাবিক। সমতা (বা "একজাতীয়তা") বৈকল্পিক, যাকে হোমোসেসেস্টাস্টিটি বলা হয় ... আগ্রহের বিষয় এখানে দ্বিতীয় ধারণা। বেশ কয়েকটি উত্স অনুমানকে আলাদাভাবে তালিকাবদ্ধ করে। কেউবা কাঁচা তথ্যের স্বাভাবিকতা …

52 anova  residuals  assumptions  normality-assumption 

minβ(Y−Xβ)T(Y−Xβ)minβ(Y−Xβ)T(Y−Xβ)\min_\beta (Y-X\beta)^T(Y-X\beta)∥β∥1≤t‖β‖1≤t\|\beta\|_1 \leq tβlassoj=sgn(βLSj)(|βLSj|−γ)+βjlasso=sgn(βjLS)(|βjLS|−γ)+ \beta_j^{\text{lasso}}= \mathrm{sgn}(\beta^{\text{LS}}_j)(|\beta_j^{\text{LS}}|-\gamma)^+ XXX

52 lasso 

মনে করুন চারটি পারস্পরিক একচেটিয়া বৈশিষ্ট্যযুক্ত আমার তিনটি জনসংখ্যা রয়েছে। আমি প্রতিটি জনসংখ্যার থেকে এলোমেলো নমুনা নিই এবং আমি যে বৈশিষ্ট্যগুলি পরিমাপ করছি তার জন্য ক্রসস্ট্যাব বা ফ্রিকোয়েন্সি টেবিল তৈরি করি। আমি কি এই কথাটি সঠিক: আমি যদি জনসংখ্যা এবং বৈশিষ্ট্যগুলির মধ্যে কোনও সম্পর্ক আছে কিনা তা পরীক্ষা করতে চাইতাম …

52 chi-squared  proportion  contingency-tables  z-test 

দেখে মনে হচ্ছে প্রচুর লোক (আমাকে সহ) এক্সেলে অনুসন্ধানের ডেটা বিশ্লেষণ করতে পছন্দ করে। কিছু সীমাবদ্ধতা, যেমন স্প্রেডশীটে অনুমোদিত সারিগুলির সংখ্যা, একটি ব্যথা তবে বেশিরভাগ ক্ষেত্রেই ডেটা দিয়ে ঘুরে বেড়ানো অ্যাক্সেলকে ব্যবহার করা অসম্ভব করে না। ম্যাককুলাও এবং হাইজারের একটি কাগজ , তবে, ব্যবহারিকভাবে চিৎকার করে বলেছে যে আপনি আপনার …

52 software  computational-statistics  excel 

on এর উপর একটি প্রমিত গাউসীয় বিতরণকে স্পষ্ট করে এর ঘনত্ব দিয়ে সংজ্ঞা দেওয়া যেতে পারে: 1RR\mathbb{R}12π−−√e−x2/212πe−x2/2 \frac{1}{\sqrt{2\pi}}e^{-x^2/2} বা এর বৈশিষ্ট্যযুক্ত ফাংশন। এই প্রশ্নের স্মরণ হিসাবে এটি কেবলমাত্র বন্টন যার জন্য নমুনাটির অর্থ এবং তারতম্যটি স্বাধীন। গওসিয়ান পদক্ষেপগুলির কী কী অন্যান্য অবাক করা বিকল্প বৈশিষ্ট্য আপনি জানেন? আমি সবচেয়ে অবাক …

52 probability  normal-distribution  mathematical-statistics  characteristic-function 

আমার একটি (প্রতিসামগ্রী) ম্যাট্রিক্স রয়েছে Mযা প্রতিটি জোড় নোডের মধ্যে দূরত্ব উপস্থাপন করে। উদাহরণ স্বরূপ, ABCDEFGHIJKL এ 0 20 20 20 40 60 60 60 100 120 120 120 বি 20 0 20 20 60 80 80 120 120 140 140 140 সি 20 20 0 20 60 80 80 …

52 clustering 

আমার কাছে একটি বৈশিষ্ট্য রয়েছে (বৈশিষ্ট্যগুলি, বাইনারি আউটপুট 0 বা 1) আকারে, তবে 1টি খুব কমই ঘটে, তাই 0 এর পূর্বে ভবিষ্যদ্বাণী করে আমি 70% থেকে 90% এর মধ্যে নির্ভুলতা পাই (আমি যে নির্দিষ্ট ডেটা দেখি তার উপর নির্ভর করে) )। এমএল পদ্ধতিগুলি আমাকে একই নির্ভুলতা সম্পর্কে দেয় এবং আমি …

52 machine-learning  classification  binary-data  unbalanced-classes 

আমি বুঝতে পারি যে কীভাবে একটি artificial neural network (ANN), ভবিষ্যদ্বাণীগুলির ত্রুটি হ্রাস করে ফিটিংটি উন্নত করতে ব্যাকপ্রোগেশন ব্যবহার করে তদারকি পদ্ধতিতে প্রশিক্ষণ দেওয়া যায়। আমি শুনেছি যে একটি এএনএন নিরীক্ষণযোগ্য শিক্ষার জন্য ব্যবহার করা যেতে পারে তবে অপ্টিমাইজেশন পর্যায়ে গাইড করার জন্য কোনও ধরণের ব্যয় বিনা ব্যতীত এটি কীভাবে …

52 clustering  neural-networks  unsupervised-learning  self-organizing-maps 

আমি রিগ্রেশন মডেল তৈরি করছি। প্রাকপ্রসেসিং পদক্ষেপ হিসাবে, আমি আমার বৈশিষ্ট্যটির মানগুলি 0 এবং মান বিচ্যুতি 1 হিসাবে স্কেল করেছি 1. লক্ষ্য মানগুলিও স্বাভাবিক করার প্রয়োজন কি?

52 regression  machine-learning 

সামাজিক বিজ্ঞানের অনেকগুলি গবেষণায় লিকার্ট স্কেল ব্যবহার করা হয়। কখন লিকার্ট ডেটা অর্ডিনাল হিসাবে ব্যবহার করা উপযুক্ত এবং কখন অন্তর ডেটা হিসাবে এটি ব্যবহার করা উপযুক্ত?

52 ordinal-data  likert  scales  measurement 

লজিস্টিক রিগ্রেশন , এসভিএম , সিদ্ধান্ত গাছ , ব্যাগিং এবং এই জাতীয় বেশ কয়েকটি অনুরূপ প্রশ্ন ব্যবহার করার সময় ভারসাম্যহীন ডেটা সম্পর্কে আমাদের ইতিমধ্যে একাধিক প্রশ্ন ছিল , এটি কী খুব জনপ্রিয় একটি বিষয় হিসাবে তৈরি করে! দুর্ভাগ্যক্রমে, প্রতিটি প্রশ্নের উত্তর অ্যালগরিদম-নির্দিষ্ট বলে মনে হয়েছে এবং ভারসাম্যহীন ডেটা নিয়ে কাজ …

52 machine-learning  classification  predictive-models  unbalanced-classes