পরিসংখ্যান এবং বড় তথ্য

টি-টেস্টের জন্য, বেশিরভাগ পাঠ্য অনুসারে এমন একটি ধারণা রয়েছে যে জনসংখ্যার ডেটা সাধারণত বিতরণ করা হয়। আমি কেন দেখছি না। কোনও টি-টেস্টের জন্য কেবল নমুনার মাধ্যমের নমুনা বন্টন সাধারণত বিতরণ করা প্রয়োজন, এবং জনসংখ্যার নয়? যদি এমনটি হয় যে টি-টেস্টের চূড়ান্তভাবে নমুনা বিতরণে স্বাভাবিকতা প্রয়োজন, জনসংখ্যা কোনও বিতরণের মতো দেখতে …

9 hypothesis-testing  t-test  assumptions  normality-assumption  central-limit-theorem 

সিএনএন-তে, আমরা কনভ্যুশনাল স্তরটিতে বৈশিষ্ট্য মানচিত্র তৈরি করতে ফিল্টারগুলি শিখব। অটোরকোডারে প্রতিটি স্তরের একক লুকানো ইউনিট ফিল্টার হিসাবে বিবেচনা করা যেতে পারে। এই দুটি নেটওয়ার্কে ফিল্টারগুলির মধ্যে পার্থক্য কী?

9 machine-learning  neural-networks  conv-neural-network  autoencoders 

আমি পয়েন্টওয়াইজ মিউচুয়াল তথ্যের সাধারণীকরণ ফর্মটি বোঝার চেষ্টা করছি। n পি এম আমি =পি এম আমি ( x , y))l ও জি( পি ( এক্স , ওয়াই)) )এনপিমিআমি=পিমিআমি(এক্স,Y)ঠণছ(পি(এক্স,Y))npmi = \frac{pmi(x,y)}{log(p(x,y))} লগের যৌথ সম্ভাবনা কেন [-1, 1] এর মধ্যে থাকা পয়েন্টওয়্যার মিউচুয়াল তথ্যকে স্বাভাবিক করে তোলে? বিষয় ভিত্তিক পারস্পরিক তথ্য হ'ল: …

9 entropy  information-theory  mutual-information 

আমি decomposeফাংশনটি ব্যবহার করি Rএবং আমার মাসিক সময় সিরিজের 3 টি উপাদান (প্রবণতা, মৌসুমী এবং এলোমেলো) নিয়ে আসি। যদি আমি চার্টটি প্লট করি বা টেবিলটি দেখি তবে আমি স্পষ্ট দেখতে পাচ্ছি যে সময় সিরিজটি seasonতুতে প্রভাবিত হয়। যাইহোক, আমি যখন 11 টি মৌসুমের ডামি ভেরিয়েবলগুলিতে টাইম সিরিজটি পুনরায় চাপিয়ে দিই …

9 r  regression  time-series 

সাম্প্রতিক আলোচনার একটি আলোচিত বিষয় জার্নালটিতে জমা দেওয়া নিবন্ধগুলি থেকে "নাল হাইপোথিসিস স্ট্যাটিস্টিকাল টেস্টিং পদ্ধতি (এনএইচএসটিপি)" ব্যবহার নিষিদ্ধ করার বিষয়ে একটি জার্নাল সম্পর্কিত। আমি এই শব্দটি কিছু লেখক দ্বারা ব্যবহৃত দেখছি, তবে তারা বুঝতে পারছে না যে তারা কী পার্থক্য তৈরি করার চেষ্টা করছে। এনএইচএসটিপি কি "হাইপোথিসিসের পরীক্ষা" বা "তাত্পর্য …

9 hypothesis-testing  statistical-significance  terminology 

ফাইলোজেনেটিক্সে, প্রায়শই এমএলই বা বায়েশিয়ান বিশ্লেষণ ব্যবহার করে ফাইলেজেনেটিক গাছগুলি নির্মিত হয়। প্রায়শই, একটি ফ্ল্যাট পূর্বে বায়েশিয়ান প্রাক্কলনে ব্যবহৃত হয়। যেমনটি আমি এটি বুঝতে পারি, একটি বায়সিয়ান অনুমান একটি সম্ভাবনা অনুমান যা পূর্বে অন্তর্ভুক্ত করে। আমার প্রশ্ন হ'ল, আপনি যদি ফ্ল্যাট আগে ব্যবহার করেন তবে এটি কি সম্ভাবনা বিশ্লেষণের থেকে …

9 bayesian  confidence-interval  maximum-likelihood  likelihood  phylogeny 

আমার লক্ষ্য হ'ল প্রবেশের সনাক্তকরণের উদ্দেশ্যে ক্লাস্টারিং / অ্যানোমালি সনাক্তকরণ ব্যবহার করে নেটওয়ার্ক লগগুলি (যেমন, অ্যাপাচি, সিসলগ, অ্যাক্টিভ ডিরেক্টরি সুরক্ষা নিরীক্ষণ এবং এই জাতীয়) বিশ্লেষণ করা। লগগুলি থেকে আমার কাছে অনেকগুলি পাঠ্য ক্ষেত্র রয়েছে যেমন আইপি ঠিকানা, ব্যবহারকারীর নাম, হোস্টনেম, গন্তব্য পোর্ট, উত্স বন্দর, এবং আরও (মোট 15-20 ক্ষেত্রগুলিতে)। লগগুলিতে …

9 feature-selection  outliers  unsupervised-learning  feature-construction 

আমার কাছে জরুরি পরিষেবাতে করা সমস্ত কল এবং অ্যাম্বুলেন্স বিভাগের প্রতিক্রিয়ার সময়গুলির সাথে একটি ডেটা সেট রয়েছে। তারা স্বীকার করেছে যে প্রতিক্রিয়া বারের সাথে কিছু ভুল রয়েছে কারণ এমন ঘটনা আছে যেখানে তারা রেকর্ডিং শুরু করেনি (সুতরাং মানটি 0) বা যেখানে তারা ঘড়িটি থামেনি (তাই মানটি চূড়ান্ত হতে পারে)। আমি …

9 mean  outliers  median  trimmed-mean 

আমি কিছু চতুর্ভুজ অপ্টিমাইজেশান সমস্যা সমাধানে সহায়তা করার জন্য একটি প্যাকেজ সন্ধান করছি এবং আমি দেখছি কমপক্ষে অর্ধ ডজন বিভিন্ন প্যাকেজ রয়েছে। এই পৃষ্ঠা অনুসারে : কিউপি (চতুষ্কোণ প্রোগ্রামিং, 90C20): সিপ্লেক্সপিআই , কার্নলব , লিমসলভ , লোআরঙ্কিউকিপি , কোয়াডপ্রাগ , আরসিপ্লেক্স , রোমোসেক এর মধ্যে কয়েকটি (রোমোসেক এবং সিপ্লেক্সাপি) অন্যান্য …

9 r  optimization 

আমার কাছে ত্রি-মাত্রিক ডেটার একটি সেট রয়েছে এবং আমি সর্বাধিক অনন্য বা অদ্ভুত মানগুলি সনাক্ত করতে স্থানীয় আউটিলার ফ্যাক্টর বিশ্লেষণটি ব্যবহার করার চেষ্টা করছি। এলওএফ বিশ্লেষণে কে-মানটি কীভাবে ব্যবহার করা যায়? আমি বুঝতে পেরেছি যে কে-মানটি নির্ধারণ করে, এবং তাই আমি বিস্মিত হই না যে আমি বিভিন্ন কে ব্যবহার করে …

9 data-mining  outliers 

আমার কখনও আনুষ্ঠানিক পরিসংখ্যান কোর্স ছিল না তবে আমার গবেষণার রেখার কারণে আমি নিয়মিতভাবে নিবন্ধগুলি জুড়ে আসছি যা বেশ কয়েকটি পরিসংখ্যানগত ধারণা প্রয়োগ করে। প্রায়শই আমি একটি নির্দিষ্ট পরিস্থিতিতে প্রয়োগ করা মন্টি কার্লো প্রক্রিয়াটির একটি বিবরণ দেখতে পাব এবং আমি যা সংগ্রহ করতে পারি তার জন্য 10 বারের মধ্যে 9 …

9 monte-carlo  random-generation 

আমি সহকর্মী একটি ছাত্র সাহায্য করার চেষ্টা করছি। পরীক্ষামূলক পরীক্ষায় ছাত্র পাখির আচরণ পর্যবেক্ষণ করে এবং গণনা করে (কলগুলির সংখ্যা)। প্রতিটি পরীক্ষার সময় একটি নির্দিষ্ট পর্যবেক্ষণ করা পাখির সাথে সম্পর্কিত কলগুলির সংখ্যা নির্ধারণ করা যায়নি তবে রেকর্ডকৃত কলগুলির সংখ্যায় অবদান রেখেছিল এমন পাখির সংখ্যা গণনা সম্ভব ছিল। সুতরাং আমার প্রাথমিক …

9 generalized-linear-model  count-data  offset 

ধরে নেওয়া যাক স্বাধীন র্যান্ডম ভেরিয়েবল যার জন্য কিছু নির্দিষ্ট পর্যায়ে quantiles : ডেটা থেকে প্রাক্কলন মাধ্যমে পরিচিত হয় , ..., । এখন যাক র্যান্ডম ভেরিয়েবল এর যোগফল হিসাবে সংজ্ঞায়িত করা যাক । সেখানে পর্যায়ে সমষ্টি সমাংশক মান গনা একটি উপায় আছে কি যে, মধ্যে ?NNNX1,...,XNX1,...,XNX_1, ..., X_Nαα\alphaα=P(X1<q1)α=P(X1<q1)\alpha = P(X_1 …

9 quantiles 

আমার বোধগম্যতা এমনকি প্রতিরোধও কার্যকারিতা দেয় না। এটি কেবল y ভেরিয়েবল এবং এক্স ভেরিয়েবল এবং সম্ভবত একটি দিকের মধ্যে সংযোগ দিতে পারে। আমি কি সঠিক? আমি প্রায়শই বেশিরভাগ কোর্সের পাঠ্যপুস্তকগুলিতে এবং অনলাইনে বিভিন্ন কোর্সের পৃষ্ঠাগুলিতে "x প্রেডিক্টস ওয়াই" এর অনুরূপ বাক্যাংশ পেয়েছি। এবং আপনি প্রায়শই রেজিস্ট্রারকে ভবিষ্যদ্বাণী হিসাবে এবং y …

9 regression  logistic  predictive-models  terminology  causality 

সুতরাং, আসুন আমরা 10 বার একটি মুদ্রা ফ্লিপ করে বলি এবং 1টিকে "ইভেন্ট" বলি। আপনি যদি এই "ইভেন্টগুলি" এর ১,০০,০০০ রান করেন তবে ০.৪ থেকে ০..6 এর মধ্যে যে সমস্ত ইভেন্ট রয়েছে তার অনুপাত কত? দ্বিপদী সম্ভাব্যতা এটি প্রায় 0.65 হিসাবে প্রস্তাব করবে, তবে আমার গাণিতিক কোডটি আমাকে 0.24 সম্পর্কে …

9 computational-statistics  mathematica