পরিসংখ্যান এবং বড় তথ্য

বলুন আমার একটি মাল্টিভেয়ারেবল (বেশ কয়েকটি স্বতন্ত্র ভেরিয়েবল) রিগ্রেশন রয়েছে যা 3 টি ভেরিয়েবল নিয়ে গঠিত। এই ভেরিয়েবলগুলির প্রত্যেকের একটি প্রদত্ত সহগ রয়েছে। যদি আমি একটি চতুর্থ ভেরিয়েবল প্রবর্তন এবং রিগ্রেশন পুনরায় চালু করার সিদ্ধান্ত নিই, তবে 3 টি মূল ভেরিয়েবলের সহগ পরিবর্তন হবে? আরও বিস্তৃতভাবে: একটি মাল্টিভেয়ারেবল (একাধিক স্বতন্ত্র …

16 regression  multiple-regression  multivariable 

আমার একটি জিপিএস ইউনিট রয়েছে যা কোভারিয়েন্স ম্যাট্রিক্সের মাধ্যমে শব্দ পরিমাপকে ছাড়িয়ে যায় ΣΣ\Sigma : Σ=⎡⎣⎢σxxσyxσxzσxyσyyσyzσxzσyzσzz⎤⎦⎥Σ=[σxxσxyσxzσyxσyyσyzσxzσyzσzz]\Sigma = \left[\begin{matrix} \sigma_{xx} & \sigma_{xy} & \sigma_{xz} \\ \sigma_{yx} & \sigma_{yy} & \sigma_{yz} \\ \sigma_{xz} & \sigma_{yz} & \sigma_{zz} \end{matrix}\right] (এছাড়াও আছে tটিt নয় তবে আসুন এক সেকেন্ডের জন্যও তা উপেক্ষা করুন)) ধরুন আমি …

16 covariance  measurement-error  uncertainty 

আমি পরিসংখ্যান শেখার চেষ্টা করছি কারণ আমি দেখতে পেয়েছি যে এটি এতটাই প্রচলিত যে এটি যদি আমি সঠিকভাবে বুঝতে না পারি তবে এটি আমাকে কিছু জিনিস শেখা থেকে নিষেধ করে। নমুনা অর্থের নমুনা বন্টনের এই ধারণাটি বুঝতে আমার সমস্যা হচ্ছে। কিছু বই এবং সাইট যেভাবে ব্যাখ্যা করেছে তা আমি বুঝতে …

16 distributions  normal-distribution  sampling  normality-assumption 

আমি আর forecastপ্যাকেজ দ্বারা মুগ্ধ , পাশাপাশি উদাহরণস্বরূপ zooঅনিয়মিত সময় সিরিজের জন্য প্যাকেজ এবং অনুপস্থিত মানগুলির বিভাজন। আমার অ্যাপ্লিকেশনটি কল সেন্টার ট্র্যাফিক পূর্বাভাসের ক্ষেত্রের, সুতরাং সাপ্তাহিক সপ্তাহের ডেটা (প্রায়) সর্বদা অনুপস্থিত থাকে যা সুন্দরভাবে পরিচালনা করতে পারে zoo। এছাড়াও, কিছু স্বতন্ত্র পয়েন্টগুলি অনুপস্থিত হতে পারে, আমি কেবল এর NAজন্য আর …

16 r  time-series  forecasting  missing-data  unevenly-spaced-time-series 

আমি সবেমাত্র কার্সেরায় মেশিন লার্নিং কোর্স থেকে একটি বক্তৃতাটি আবার দেখলাম। অধ্যাপক তত্ত্বাবধানে শেখার অ্যাপ্লিকেশনগুলিতে প্রাক-প্রসেসিং ডেটার জন্য পিসিএ নিয়ে আলোচনা করেন যেখানে, তিনি বলেছেন যে পিসিএ কেবলমাত্র প্রশিক্ষণের ডেটাতে করা উচিত এবং তারপরে ম্যাপিংটি ক্রস বৈধকরণ এবং পরীক্ষার সেটগুলিতে রূপান্তর করতে ব্যবহৃত হয়। আরও দেখুন পিসিএ এবং ট্রেন / …

16 r  pca  cross-validation  caret 

আমি প্রায়শই পয়েসন মডেল ফিট ফিট বা না হয় কিনা তা যাচাই করার জন্য পরামর্শটি স্বাধীনতার ডিগ্রি দ্বারা অবশিষ্টাংশের বিচ্যুতিকে বিভক্ত করার সাথে যুক্ত করেছি। ফলাফল অনুপাতটি "আনুমানিক 1" হওয়া উচিত। প্রশ্নটি হল "আনুমানিক" এর জন্য আমরা কোন পরিসরের কথা বলছি - বিকল্পের মডেল ফর্মগুলি বিবেচনা করতে অ্যালার্ম বন্ধ করা …

16 poisson-distribution  negative-binomial  poisson-regression  overdispersion 

কেউ কি আমার জন্য সম্ভাব্য উদাহরণগুলির সংক্ষিপ্তসার জানাতে পারে, কোন পরিস্থিতিতে প্রশিক্ষণের ডেটা বৃদ্ধি করা সামগ্রিক ব্যবস্থার উন্নতি করে? আমরা কখন সনাক্ত করি যে আরও প্রশিক্ষণের ডেটা যুক্ত করা সম্ভব ডেটাগুলি বেশি পরিমাণে ফিট করে এবং পরীক্ষার ডেটাগুলিতে ভাল যথার্থতা দিতে পারে না? এটি একটি খুব অ-নির্দিষ্ট প্রশ্ন, তবে আপনি …

16 machine-learning  classification  dataset  precision-recall 

আপনি কীভাবে পরীক্ষা বা পরীক্ষা করে দেখতে পারবেন যে স্যাম্পলিং আইআইডি (স্বতন্ত্র এবং আইডেন্টালি বিতরণ করা হয়)? মনে রাখবেন যে আমি গাউসিয়ান এবং আইডেন্টিটিলি বিতরণ করি না, কেবল আইআইডি। এবং আমার মনে যে ধারণাটি আসে তা হ'ল নমুনাকে বারবার সমান আকারের দুটি উপ-নমুনায় ভাগ করা, কোলমোগোরভ-স্মারনভ পরীক্ষা করা এবং পি-মানগুলির …

16 hypothesis-testing  independence  kolmogorov-smirnov  resampling  iid 

একটি পরীক্ষামূলক ডিজাইন ডেটা ফ্রেম থেকে ডেটা সিমুলেশন। আর এর উপর ফোকাস সহ (যদিও অন্যান্য ভাষার সমাধানটি দুর্দান্ত হবে)। একটি পরীক্ষা বা জরিপ ডিজাইনের ক্ষেত্রে ডেটা সিমুলেটেড করা এবং এই সিমুলেটেড ডেটা বিশ্লেষণ পরিচালনা করা ডিজাইনের সুবিধাগুলি এবং দুর্বলতাগুলির উপর ভয়ঙ্কর অন্তর্দৃষ্টি সরবরাহ করতে পারে। এই জাতীয় দৃষ্টিভঙ্গি পরিসংখ্যান পরীক্ষার …

16 r  experiment-design  simulation 

আমার কাছে কোনও পরিসংখ্যান ব্যাকগ্রাউন্ড না নিয়ে দর্শকদের কাছে পরিসংখ্যান কৌশলগুলি ব্যাখ্যা করতে সবসময়ই কঠিন সময় হয়। যদি আমি এই ধরণের দর্শকদের কাছে জিএলএম কী তা ব্যাখ্যা করতে চাই (স্ট্যাটিস্টিকাল জারগন ছাড়াই), তবে সবচেয়ে ভাল বা কার্যকর উপায় কী হবে? আমি সাধারণত তিনটি অংশ দিয়ে জিএলএমকে ব্যাখ্যা করি - (1) …

16 generalized-linear-model  communication 

আমার একটি সার্লেট-ভিত্তিক অ্যাপ্লিকেশন রয়েছে যার মধ্যে আমি সেই সার্লেটের প্রতিটি অনুরোধ শেষ করতে সময়টি পরিমাপ করি। আমি ইতিমধ্যে গড় এবং সর্বোচ্চের মতো সাধারণ পরিসংখ্যান গণনা করেছি; আমি তবে আরও কিছু পরিশীলিত বিশ্লেষণ তৈরি করতে চাই এবং এটি করার জন্য আমি বিশ্বাস করি যে এই প্রতিক্রিয়ার সময়গুলি সঠিকভাবে মডেল করা …

16 distributions  web 

আমি বুঝতে পারি এটি বিষয়ভিত্তিক, তবে আমি ভেবেছিলাম আমাদের প্রিয় ডেটাসেটগুলি এবং আমরা যা মনে করি সেগুলি আকর্ষণীয় করে তোলে সে সম্পর্কে কথা বললে ভাল লাগবে। এখানে প্রচুর পরিমাণে ডেটা রয়েছে এবং ক্লাসিক ডেটাসেটের (যেমন, আর ডেটা ) সমস্ত এপিআই (যেমন, ডেটামব ) এর সাথে কী রয়েছে, আমি মনে করি …

16 dataset 

আমার কাছে ডেটা গণনা রয়েছে (গ্রাহকের সংখ্যা গণনা সহ চাহিদা / অফার বিশ্লেষণ, - সম্ভবত - বহু কারণের উপর নির্ভর করে) have আমি স্বাভাবিক ত্রুটিগুলি সহ একটি লিনিয়ার রিগ্রেশন চেষ্টা করেছি, তবে আমার কিউকিউ-প্লটটি আসলে ভাল নয়। আমি উত্তরের লগ রূপান্তরের চেষ্টা করেছি: আবারও খারাপ কিউকিউ-প্লট। তাই এখন, আমি পইসন …

16 count-data  poisson-regression  overdispersion  quasi-likelihood 

আমাকে আমাদের বর্তমানের বৃহত স্টোকাস্টিক মডেলগুলির একটি এসএএস থেকে বের করে একটি নতুন ভাষায় সরিয়ে দেওয়ার দায়িত্ব দেওয়া হয়েছে। ব্যক্তিগতভাবে, আমি একটি traditionalতিহ্যবাহী সংকলিত ভাষা পছন্দ করি, কিন্তু পিআই আমাকে আর ব্যবহার করতে চায় যা আমি কখনও ব্যবহার করি নি check মডেলটিকে এসএএস থেকে বের করার জন্য আমাদের অনুপ্রেরণা হ'ল …

16 r  computing 

কিছু নিয়মিতকরণের সাথে লিনিয়ার রিগ্রেশন বিবেচনা করুন: উদাহরণস্বরূপ যেটি হ্রাস করুন | | একটি এক্স - বি | | 2 + λ | | এক্স | | 1xxx||Ax−b||2+λ||x||1||Ax−b||2+λ||x||1||Ax - b||^2+\lambda||x||_1 সাধারণত, এ এর ​​কলামগুলিকে শূন্য গড় এবং একক আদর্শ হিসাবে মানক করা হয়, এবং শূন্য গড় হিসাবে কেন্দ্রীভূত হয়। মানককরণ …

16 regression  lasso  regularization  standardization