পরিসংখ্যান এবং বড় তথ্য

কিছু পরিসংখ্যান পরীক্ষা শক্ত এবং কিছু না। দৃ rob়তা মানে কি? আশ্চর্যজনকভাবে, আমি এই সাইটে এই জাতীয় প্রশ্ন খুঁজে পাইনি। তদুপরি, কখনও কখনও দৃ rob়তা এবং একটি পরীক্ষার ক্ষমতা এক সাথে আলোচনা করা হয়। এবং স্বজ্ঞাতভাবে, আমি দুটি ধারণার মধ্যে পার্থক্য করতে পারিনি। একটি শক্তিশালী পরীক্ষা কি? এটি শক্তিশালী পরিসংখ্যান …

14 statistical-significance  power  robust 

কোনও বিতরণের পরিবারের অন্যান্য বিভাগের তুলনায় পরিসংখ্যানের জন্য আলাদা সংজ্ঞা রয়েছে কি? সাধারণভাবে, কার্ভগুলির পরিবার হ'ল একটি বক্ররেখাগুলির সেট, যার প্রত্যেকটিই একটি ফাংশন বা প্যারামিট্রাইজেশন দ্বারা দেওয়া হয় যেখানে এক বা একাধিক পরামিতি বিভিন্ন হয়। যেমন পরিবারগুলি বৈদ্যুতিন উপাদানগুলি বৈশিষ্ট্যযুক্ত করতে ব্যবহৃত হয় । পরিসংখ্যানগুলির জন্য, একটি উত্স অনুসারে একটি …

14 distributions  terminology  parametric  exponential-family 

ধরা যাক আমাদের ইনপুট (প্রেডিকটার) এবং আউটপুট (প্রতিক্রিয়া) ডেটা পয়েন্ট এ, বি, সি, ডি, ই রয়েছে এবং আমরা পয়েন্টগুলির মধ্যে একটি লাইন ফিট করতে চাই। প্রশ্নটি চিত্রিত করার জন্য এটি একটি সাধারণ সমস্যা, তবে উচ্চতর মাত্রায়ও বাড়ানো যেতে পারে। সমস্যা বিবৃতি বর্তমানের সেরা ফিট বা অনুমানটি উপরের কৃষ্ণাঙ্গ রেখা দ্বারা …

14 regression  linear  fitting  cost-maximization 

(এএ অনেকের মধ্যে একটি হবে, বিবি হবে না) আমি ভেবেছিলাম এটি 10! / 8 হবে! তবে স্পষ্টতই আমি কিছু ভুল করছি। কেউ আমাকে সাহায্য করতে পারে কারণ আমি স্টাম্পড হয়েছি।

14 self-study  combinatorics 

সুতরাং, এটি একটি সাধারণ প্রশ্ন হতে পারে তবে আমি কখনও সন্তোষজনক উত্তর পাই না। নাল অনুমানটি সত্য (বা মিথ্যা) যে সম্ভাবনা রয়েছে তা আপনি কীভাবে নির্ধারণ করবেন? ধরা যাক আপনি ছাত্রদের একটি পরীক্ষার দুটি পৃথক সংস্করণ দিয়েছেন এবং দেখতে চান যে সংস্করণগুলি সমান ছিল। আপনি একটি টি-টেস্ট করেন এবং এটি …

14 probability  hypothesis-testing  bayesian 

মিনি ব্যাচের গ্রেডিয়েন্ট বংশোদ্ভূত কীভাবে একটি জিন পয়েন্টে আটকা যেতে পারে তা নিয়ে আমি বর্তমানে কিছুটা বিস্মিত হয়েছি। সমাধানটি খুব তুচ্ছ হতে পারে যা আমি এটি পাই না। আপনি একটি নতুন নমুনা প্রত্যেক যুগে পেতে, এবং এটি একটি নতুন একটি নতুন ব্যাচ উপর ভিত্তি করে ত্রুটি নির্ণয়, তাই খরচ ফাংশন …

14 gradient-descent  sgd 

আমি এটি বোঝাতে চাই যে মডেলটি পৃথক ডেটা পয়েন্টের পূর্বাভাস দেওয়ার ক্ষেত্রে খারাপ তবে দৃ firm় প্রবণতা প্রতিষ্ঠা করেছে (উদাহরণস্বরূপ x যখন উপরে যায় তখন y উপরে যায়)।

14 regression  inference  r-squared  linear 

β^λ=argminβ∈Rp12n∥y−Xβ∥22+λ∥β∥1,β^λ=arg⁡minβ∈Rp12n‖y−Xβ‖22+λ‖β‖1,\hat\beta^\lambda = \arg\min_{\beta \in \mathbb{R}^p} \frac{1}{2n} \|y - X \beta\|_2^2 + \lambda \|\beta\|_1,ithithi^{th}xi∈Rpxi∈Rpx_i \in \mathbb{R}^pX∈Rn×pX∈Rn×pX \in \mathbb{R}^{n \times p}yiyiy_ii=1,…ni=1,…ni=1, \dots n আমরা জানি যে λ≥1n∥XTy∥∞λ≥1n‖XTy‖∞\lambda \geq \frac{1}{n} \|X^T y\|_\infty , লাসো অনুমান β^λ=0β^λ=0\hat\beta^\lambda = 0 । (উদাহরণস্বরূপ, লাসো এবং রিজ টিউনিংয়ের প্যারামিটার স্কোপ দেখুন )) অন্য স্বীকৃতিতে এটি প্রকাশ করছে …

14 lasso  regularization 

প্রয়োগকৃত গবেষণায় পি-মানগুলির পরিবর্তে প্রভাব মাপের উপর নির্ভর করা এবং প্রতিবেদনের উপর প্রচুর জোর দেওয়া হয় (উদাহরণস্বরূপ আরও নীচে উদ্ধৃতি)। তবে কি এমনটি হয় না যে কোনও পি-ভ্যালুর মতো কোনও এফেক্ট মাপটি একটি এলোমেলো পরিবর্তনশীল এবং একই পরীক্ষার পুনরাবৃত্তি করা হলে নমুনা থেকে নমুনায় পরিবর্তিত হতে পারে? অন্য কথায়, আমি …

14 hypothesis-testing  confidence-interval  p-value  effect-size 

কনভ্যুশনাল নিউরাল নেটওয়ার্কগুলিতে (সিএনএন) প্রতিটি পদক্ষেপে ওজনের ম্যাট্রিক্স কনভলশনটি এগিয়ে যাওয়ার আগে কার্নেল ম্যাট্রিক্স পেতে তার সারি এবং কলামগুলি উল্টে যায়। এটি হুগো লোরোচেলের একটি সিরিজের ভিডিওতে এখানে ব্যাখ্যা করা হয়েছে : লুকানো মানচিত্রের গণনা করা কার্নেল ম্যাট্রিক্স [...] ব্যবহার করে পূর্ববর্তী স্তর থেকে একটি চ্যানেলের সাথে একটি পৃথক সমঝোতা …

14 machine-learning  neural-networks  conv-neural-network  convolution 

আমি ভাবছি সর্বাধিক সম্ভাবনার প্রাক্কলনটি কখনই পরিসংখ্যানগুলিতে ব্যবহৃত হয়। আমরা এটির ধারণাটি শিখি তবে অবাক হয় কখন এটি প্রকৃতপক্ষে ব্যবহৃত হয়। আমরা যদি ডেটার বন্টন ধরে নিই, আমরা দুটি পরামিতি পাই, একটি গড়ের জন্য এবং একটি ভেরিয়েন্সের জন্য, তবে আপনি কি বাস্তবে এটি বাস্তব পরিস্থিতিতে ব্যবহার করেন? কেউ কি আমাকে …

14 estimation  maximum-likelihood 

কেন লিনিয়ার রিগ্রেশন এবং জেনারেলাইজড মডেলটির বেমানান অনুমান রয়েছে? লিনিয়ার রিগ্রেশন-এ, আমরা অনুমান করি যে অবশিষ্টাংশ আসে গাউসিয়ান রূপের অন্যান্য রিগ্রেশন (লজিস্টিক রিগ্রেশন, বিষ রিগ্রেশন) এ আমরা ধরে নিই যে প্রতিক্রিয়াটি কিছু বন্টন (দ্বিপদী, শিরা ইত্যাদি) তৈরি করে। কেন কখনও কখনও অনুমিত এবং অন্যান্য সময় সাড়া অনুমান? আমরা বিভিন্ন সম্পত্তি …

14 regression  generalized-linear-model  assumptions  linear 

কেন তাদের "মেশিন" বলা হয়? এই প্রসঙ্গে "মেশিন" শব্দের কোন উত্স ব্যবহৃত হয়েছে? ("লিনিয়ার প্রোগ্রামিং" নামটির মতো বিভ্রান্তিকর হতে পারে তবে কেন আমরা "প্রোগ্রামিং" বলা হয় তা আমরা জানি))

14 svm  terminology  rbm  etymology 

এটি মোটেও একটি অদ্ভুত প্রশ্ন হতে পারে তবে আমি ভাবছি যে বিষয়টির জন্য একজন নবজাতক হিসাবে আমরা কেন অবসর ব্যবহার করি কেন সময়সীমা অবলম্বন করার জন্য যদি রিগ্রেশনটির অনুমানের একটি হ'ল ডেটা আইড করা উচিত তবে যে রেগ্রেশনটি প্রয়োগ করা হচ্ছে সেই ডেটা হ'ল আইআইডি?

14 regression  time-series  trend  iid 

ডিএস সিভিয়ার "ডেটা অ্যানালাইসিস" -তে, দ্বিপদী বিতরণ থেকে পইসন বিতরণটির একটি উত্স রয়েছে। তারা যুক্তি দেয় যে পয়েসন বিতরণ দ্বিপদী বিতরণের সীমাবদ্ধ ক্ষেত্রে যখন M→∞M→∞M\rightarrow\infty , যেখানে MMM পরীক্ষার সংখ্যা। প্রশ্ন 1: কীভাবে সেই যুক্তিটি স্বজ্ঞাতভাবে বোঝা যাবে? প্রশ্ন 2 কেন large- হয় MMM সীমা এম এন এরM!N!(M−N)!M!N!(M−N)!\frac{M!}{N!(M-N)!} সমানMNN!MNN!\frac{M^{N}}{N!}যেখানেNNNসফলতাগুলি সংখ্যাMMMবিচারের? …

14 binomial  poisson-distribution  combinatorics  intuition  probability-calculus