পরিসংখ্যান এবং বড় তথ্য

এই শব্দটি পদ্ধতি সম্পর্কিত থ্রেডগুলিতে প্রায়শই উপস্থিত হয় । ডেটা মাইনিং এবং স্ট্যাটিস্টিকাল লার্নিংয়ে কি কোনও নির্দিষ্ট পদ্ধতির মিশ্রণ করা হয় ? আমি গুগল থেকে কোনও প্রাসঙ্গিক ফলাফল পেতে পারি না। দেখে মনে হচ্ছে মিশ্রণটি অনেকগুলি মডেল থেকে ফলাফলগুলি মিশ্রিত করছে এবং এর ফলে আরও ভাল ফলাফল হয়। এমন কোনও …

15 machine-learning  data-mining  unsupervised-learning  statistical-learning 

উদাসীনতার নীতিটি ব্যবহার করে বার্ট্র্যান্ড প্যারাডক্সের জয়েসের সমাধান বিবেচনা করুন । বোরেল-কোলমোগোরভ প্যারাডক্সে কেন একই জাতীয় যুক্তি প্রয়োগ হয় না ? এই সমস্যাটি যে গোলকটির জন্য একটি অভিমুখ নির্দিষ্ট করে না তাই এই গোলকটি ঘোরানোটি নির্বাচিত সীমাবদ্ধকরণ প্রক্রিয়া দ্বারা প্রাপ্ত ফলাফলের বিতরণকে প্রভাবিত করবে না এমন যুক্তি দিয়ে কিছু ভুল …

15 theory  paradox 

সবচেয়ে শক্তিশালী পারস্পরিক সম্পর্কের (মাত্র দুটি মাত্রার পাশাপাশি) বৃহত্তর পুল থেকে ডেটা পয়েন্টের উপসেটটি নির্বাচনের জন্য কিছু মানক পদ্ধতি রয়েছে (যেমন কোনও এটি একটি রেফারেন্স হিসাবে উল্লেখ করতে পারে)? উদাহরণস্বরূপ, বলুন আপনার কাছে 100 ডেটা পয়েন্ট রয়েছে। আপনি এক্স এবং ওয়াইয়ের মাত্রাগুলি সহ শক্তিশালী পারস্পরিক সম্পর্ক সহ 40 পয়েন্টের একটি …

15 regression  correlation  autocorrelation 

একটি অ্যাসাইনমেন্টের অংশ হিসাবে, আমাকে দুটি ভবিষ্যদ্বাণী ভেরিয়েবলের সাথে একটি মডেল ফিট করতে হয়েছিল। আমাকে তখন অন্তর্ভুক্ত পূর্বাভাসীদের একজনের বিরুদ্ধে মডেলের অবশিষ্টাংশের একটি প্লট আঁকতে হয়েছিল এবং তার ভিত্তিতে পরিবর্তন আনতে হয়েছিল। প্লটটি একটি বক্ররেখার প্রবণতা দেখিয়েছিল এবং তাই আমি সেই ভবিষ্যদ্বাণীকের জন্য একটি চতুর্ভুজ শব্দটি অন্তর্ভুক্ত করেছি। নতুন মডেলটি …

15 statistical-significance  multiple-regression  modeling 

আত্মবিশ্বাসের ব্যবধান গণনা করার জন্য আমি এই ভিডিও লেকচারটি উল্লেখ করছিলাম । তবে আমার কিছুটা বিভ্রান্তি আছে। এই লোকটি গণনার জন্য statics ব্যবহার করছে। তবে আমি মনে করি এটি একটি টি- স্ট্যাটিস্টিক্স হওয়া উচিত ছিল । আমাদের জনসংখ্যার সত্যিকারের আদর্শ বিচ্যুতি দেওয়া হয়নি। আমরা সত্যটি অনুমান করতে নমুনার মানক বিচ্যুতিটি …

15 confidence-interval  t-distribution 

ছাড়া সূত্র উদ্ধৃত, উইকিপিডিয়া সংজ্ঞায়িত ক্রস এনট্রপি বিযুক্ত ডিস্ট্রিবিউশন এবং কিউ হতেপিপিPপ্রশ্নঃপ্রশ্নঃQ এইচ×( পি; প্রশ্ন )= - ∑এক্সপি ( এক্স )লগকুই( এক্স ) ।এইচ×(পি;প্রশ্নঃ)=-Σএক্সপি(এক্স)লগ⁡কুই(এক্স)।\begin{align} \mathrm{H}^{\times}(P; Q) &= -\sum_x p(x)\, \log q(x). \end{align} কে এই পরিমাণ ব্যবহার করা শুরু করেছিলেন কে? এবং এই শব্দটি কে আবিষ্কার করেছেন? আমি ভিতরে তাকিয়েছি: জে …

15 information-theory  entropy 

ধরুন আমাদের আছে এক্স 2 ∼ ইউনিফর্ম ( এন , 0 , 1 ) ,X1∼unif(n,0,1),X1∼unif(n,0,1),X_1 \sim \textrm{unif}(n,0,1), X2∼unif(n,0,1),X2∼unif(n,0,1),X_2 \sim \textrm{unif}(n,0,1), যেখানে হ'ল এন সাইজের অভিন্ন র্যান্ডম নমুনা এবংunif(n,0,1)unif(n,0,1)\textrm{unif}(n,0,1) Y=X1,Y=X1,Y=X_1, Z=0.4X1+1−0.4−−−−−−√X2.Z=0.4X1+1−0.4X2.Z = 0.4 X_1 + \sqrt{1 - 0.4}X_2. তারপর মধ্যে পারস্পরিক এবং জেড হয় 0.4 ।YYYZZZ0.40.40.4 আমি কীভাবে এটি তিনটি ভেরিয়েবলে …

15 r  correlation  random-generation  uniform 

আমি মাল্টিভারিয়েট লিনিয়ার মডেলটি পুনরায় চাপতে আর এস এস এস প্যাকেজে rlm ব্যবহার করছি। এটি বেশ কয়েকটি নমুনার জন্য ভাল কাজ করে তবে আমি একটি নির্দিষ্ট মডেলের জন্য কোয়াটি-নাল সহগ পাচ্ছি: Call: rlm(formula = Y ~ X1 + X2 + X3 + X4, data = mymodel, maxit = 50, na.action …

15 r  multiple-regression  robust 

গত সপ্তাহে আমার এক ভাল বন্ধুর সাথে আমার একটি আকর্ষণীয় আলোচনা হয়েছিল। তিনি কিছু অনলাইন জুজু খেলছিলেন এবং পরামর্শ দিয়েছিলেন যে নতুন সাবস্ক্রিপশন / অতিরিক্ত অর্থ স্থানান্তর এবং যে কার্ড আপনি লেনদেন করেছেন তার মধ্যে একটি সম্পর্ক রয়েছে, অর্থাত্ আপনি কুঁড়ে যাওয়ার জন্য ভাল কার্ড পাবেন। যদি এটি সত্য হয় …

15 binomial  games  wilcoxon-signed-rank 

আমি একটি মেশিন লার্নিং কোর্স অধ্যয়ন করছি এবং লেকচার স্লাইডগুলিতে এমন তথ্য রয়েছে যা আমি প্রস্তাবিত বইয়ের সাথে বিরোধিতা পাই। সমস্যাটি নিম্নলিখিত: তিনটি শ্রেণিবদ্ধ রয়েছে: শ্রেণিবদ্ধ একটি থ্রেশহোল্ডগুলির নিম্ন সীমার মধ্যে আরও ভাল পারফরম্যান্স সরবরাহ করে, শ্রেণিবদ্ধ বি প্রান্তিকের উচ্চতর পরিসরে আরও ভাল কর্মক্ষমতা সরবরাহ করে, শ্রেণিবদ্ধ সি আমরা একটি …

15 machine-learning  probability  data-visualization  classification  roc 

সময় সিরিজে অসাধারণতা সনাক্ত করার জন্য আমি একটি অ্যালগরিদম সেট আপ করতে চাই এবং আমি এটির জন্য ক্লাস্টারিং ব্যবহার করার পরিকল্পনা করছি। ক্লাস্টারিংয়ের জন্য কেন আমি দূরত্বের ম্যাট্রিক্স ব্যবহার করব এবং কাঁচা সময় সিরিজের ডেটা নয় ?, অসঙ্গতি সনাক্তকরণের জন্য, আমি ঘনত্ব-ভিত্তিক ক্লাস্টারিং ব্যবহার করব, ডিবিস্কান হিসাবে একটি অ্যালগরিদম, তাই …

15 time-series  clustering  trend 

নন-লিনিয়ার মডেলটিতে গ্রুপিং ভেরিয়েবল ব্যবহার সংক্রান্ত আমার একটি প্রশ্ন রয়েছে। যেহেতু এনএলএস () ফাংশনটি ফ্যাক্টর ভেরিয়েবলের জন্য অনুমতি দেয় না, তাই মডেল ফিটের উপর কোনও ফ্যাক্টরের প্রভাব পরীক্ষা করতে পারে কিনা তা জানার জন্য আমি লড়াই করে যাচ্ছি। আমি নীচে একটি উদাহরণ অন্তর্ভুক্ত করেছি যেখানে আমি "বর্ধিত ভন বার্টালানফি" বর্ধনের …

15 r  mixed-model  nls 

ফাংশনাল ডেটা অ্যানালাইসিস (এফডিএ) এ আমি খুব নতুন। আমি পড়ছি: র‌্যামসে, জেমস ও।, এবং সিলভারম্যান, বার্নার্ড ডাব্লু। (2006), ফাংশনাল ডেটা অ্যানালাইসিস, ২ য় সংস্করণ, স্প্রিংগার, নিউইয়র্ক। তবে এফডিএ কোথায় / কখন ব্যবহার করব তা আমি এখনও খুব পরিষ্কার জানি না? কেউ দয়া করে আমাকে বিশেষ করে চর্চা ক্ষেত্রে একটি উদাহরণ …

15 statistical-significance  cross-validation  nonparametric 

"বুটস্ট্র্যাপ বৈধতা" / "পুনর্নির্মাণ ক্রস-বৈধকরণ" আমার কাছে নতুন, তবে এই প্রশ্নের উত্তর দিয়ে আলোচনা করা হয়েছিল । আমি সংগ্রহ করি এটিতে 2 ধরণের ডেটা জড়িত থাকে: আসল ডেটা এবং সিমুলেটেড ডেটা, যেখানে সিমুলেটেড ডেটাগুলির একটি সেট সেট রিয়েল রিপ্লেলিং-উইথ রিপ্লেসমেন্টের মাধ্যমে আসল ডেটা থেকে উত্পন্ন হয় যতক্ষণ না সিমুলেটেড ডেটা …

15 cross-validation  bootstrap  validation  resampling 

পুরনো এই সাইটের আমি সম্প্রতি স্যাঙ্কই রেখাচিত্র, কি একটা ঘটছে ঠাহর করার একটি দুর্দান্ত উপায় আবিষ্কার করেছি ঐতিহ্যগত প্রবাহ চার্ট। জর্জ এম হোয়াইটসাইডস এবং জর্জ ডাব্লু ক্র্যাবট্রি , উত্স দ্বারা সানকি ডায়াগ্রামের একটি ভাল উদাহরণ এখানে ; এনার্জি দীর্ঘমেয়াদী মৌলিক গবেষণা ভুলবেন না , বিজ্ঞান 9 ফেব্রুয়ারী 2007: ভোল। 315. …

15 r  data-visualization  sankey-diagram