পরিসংখ্যান এবং বড় তথ্য

সর্বাধিক সুপরিচিত ডাকাত অ্যালগরিদম হ'ল আপার কনফিডেন্স বাউন্ড (ইউসিবি) যা এই শ্রেণীর অ্যালগরিদমকে জনপ্রিয় করেছে। সেই থেকে আমি ধারণা করছি এখন আরও ভাল অ্যালগরিদম আছে। বর্তমানের সেরা অ্যালগরিদম কী (উভয় ক্ষেত্রে অভিজ্ঞতামূলক পারফরম্যান্স বা তাত্ত্বিক সীমার ক্ষেত্রে)? এই অ্যালগরিদম কি কোনও অর্থে অনুকূল?

27 machine-learning  algorithms  theory  reinforcement-learning  multiarmed-bandit 

আমি এই প্রশ্নের চারপাশের আলোচনার প্রতিবিম্বিত করছি এবং বিশেষত ফ্র্যাঙ্ক হ্যারেলের মন্তব্য যে হ্রাস করা মডেলটির (যেমন একটি ব্যাখ্যাযোগ্য পরিবর্তনশীল পরীক্ষা করা হয়েছে এবং প্রত্যাখ্যান করা হয়েছে) তারতম্যের জন্য অনুমানটি ইয়ে এর জেনারালাইজড ডিগ্রি অফ ফ্রিডম ব্যবহার করা উচিত । প্রফেসর হ্যারেল বলেছেন যে এটি একটি চূড়ান্ত মডেল (যেখান থেকে …

27 r  regression  model-selection  regression-strategies 

বন্ধ থাকে। এই প্রশ্নটি অফ-টপিক । এটি বর্তমানে উত্তর গ্রহণ করছে না। এই প্রশ্নটি উন্নত করতে চান? প্রশ্নটি আপডেট করুন যাতে এটি ক্রস ভ্যালিডেটের জন্য অন-বিষয় । গত বছর বন্ধ ছিল । এমন কোনও কমান্ড-লাইন সরঞ্জাম আছে যা স্ট্যান্ডার্ড ইনপুট থেকে সংখ্যার প্রবাহকে (এসকিআই ফর্ম্যাটে) গ্রহণ করে এবং এই প্রবাহের …

27 descriptive-statistics  computational-statistics  computing 

এটি সুপরিচিত, বিশেষত প্রাকৃতিক ভাষা প্রক্রিয়াকরণে, মেশিন লার্নিংয়ের দুটি ধাপে এগিয়ে যাওয়া উচিত, একটি প্রশিক্ষণের পদক্ষেপ এবং একটি মূল্যায়নের পদক্ষেপ এবং তাদের আলাদা আলাদা ডেটা ব্যবহার করা উচিত। কেন? স্বজ্ঞাতভাবে, এই প্রক্রিয়াটি উপাত্তগুলিকে অত্যধিক মান্যতা এড়াতে সহায়তা করে, তবে আমি কোনও (তথ্য-তাত্ত্বিক) দেখতে ব্যর্থ হলাম কারণ এটি ক্ষেত্রে। সম্পর্কিত, আমি …

27 machine-learning  cross-validation 

এই প্রশ্নটি গণিত স্ট্যাক এক্সচেঞ্জ থেকে স্থানান্তরিত হয়েছিল কারণ ক্রস ভ্যালিডেটে উত্তর দেওয়া যেতে পারে। 7 বছর আগে স্থানান্তরিত । আমার পরিসংখ্যান শিক্ষক নিম্নলিখিত সমস্যাটি সম্পর্কে বলেছিলেন এমন কিছু সম্পর্কে আমার একটি প্রশ্ন রয়েছে। আমার প্রশ্ন এমনকি এই পরিস্থিতিতে সিম্পসনের প্যারাডক্সের ঘটনা সম্পর্কে নয়। আমার প্রশ্নটি কেবল আমার অধ্যাপকের জেদ …

27 self-study  confounding  simpsons-paradox 

আমি অনেকবার দাবি দেখলাম যে তাদের পরিস্ফুট হতে হবে (এ জাতীয় বইয়ের উদাহরণগুলি সর্বদা এইভাবে প্রস্তুত করা হত যে তারা সত্যই ছিল), অন্যদিকে আমি বহুবার বইও দেখেছি যে তাদের একচেটিয়া হওয়া উচিত ( উদাহরণস্বরূপ, কে μ 1 = μ 2 এবং এইচ 1 হিসাবে μ 1 > μ 2 ) …

27 hypothesis-testing 

পাঠ্য শ্রেণিবিন্যাসে, আমার প্রায় 800 টি নমুনা সহ একটি প্রশিক্ষণ সেট রয়েছে এবং প্রায় 150 টি নমুনা সহ একটি পরীক্ষা সেট রয়েছে। পরীক্ষার সেটটি কখনও ব্যবহার করা হয়নি, এবং শেষ অবধি ব্যবহারের জন্য অপেক্ষা করছে। ক্লাসিফায়ারগুলি এবং বৈশিষ্ট্যগুলি সুর করার সময় এবং টুইট করার সময় আমি 10 টি ভাঁজ ক্রস …

27 machine-learning  classification  cross-validation  text-mining 

এই প্রশ্নটি গণিত স্ট্যাক এক্সচেঞ্জ থেকে স্থানান্তরিত হয়েছিল কারণ ক্রস ভ্যালিডেটে উত্তর দেওয়া যেতে পারে। 8 বছর আগে স্থানান্তরিত । যখন আমি কিছু সফ্টওয়্যার প্যাকেজগুলিতে লিনিয়ার রিগ্রেশন করি (উদাহরণস্বরূপ ম্যাথমেটিকা), আমি মডেলের পৃথক প্যারামিটারগুলির সাথে যুক্ত পি-ভ্যালুগুলি পাই। উদাহরণস্বরূপ, একটি লিনিয়ার রিগ্রেশন ফলাফল যা উত্পাদন করে তার সাথে একটি পি-মান …

27 probability  regression 

আগে জেফরি বিবেচনা করুন যেখানে , যেখানে ফিশার তথ্য।p(θ)∝|i(θ)|−−−−√p(θ)∝|i(θ)|p(\theta) \propto \sqrt{|i(\theta)|}iii আমি এই পূর্বেরটিকে একটি অপ্রয়োজনীয় পূর্ব হিসাবে উল্লেখ করা দেখছি, তবে কেন এটি তাত্পর্যপূর্ণ তা আমি কোনও যুক্তি দেখিনি। সর্বোপরি, এটি একটি ধ্রুবক পূর্ব নয়, সুতরাং আরও কিছু যুক্তি থাকতে হবে। আমি বুঝতে পারি যে এটি পুনঃনির্মাণের উপর নির্ভর …

27 bayesian  prior 

আমি আর আর সময় সিরিজের বিশ্লেষণে নতুন। আমি দৈনিক তাপমাত্রার সময় সিরিজের দীর্ঘ (40 বছর) প্রবণতাটি অনুসন্ধান করার চেষ্টা করছি এবং বিভিন্ন অনুমানের চেষ্টা করেছি। প্রথমটি হ'ল একটি সাধারণ লিনিয়ার রিগ্রেশন এবং দ্বিতীয়টি হ'ল essতু দ্বারা টাইম সিরিজের মৌসুমী ক্ষয়। পরবর্তীকালে এটি প্রদর্শিত হয় যে alতু উপাদান ট্রেন্ডের চেয়ে বেশি। …

27 r  time-series  trend 

এটি পরিভাষা সম্পর্কে একটি প্রশ্ন। একটি "অস্পষ্ট পূর্ব" কি অ-তথ্যমূলক পূর্বের মতো একই, বা উভয়ের মধ্যে কিছু পার্থক্য রয়েছে? আমার ধারণাটি হ'ল এগুলি একই (একসাথে অস্পষ্ট এবং অ-তথ্যমূলক তথ্য অনুসন্ধান করা), তবে আমি নিশ্চিত হতে পারি না।

27 bayesian  prior  terminology 

আন্তঃ-বাজার বিশ্লেষণ হ'ল বিভিন্ন বাজারের মধ্যে সম্পর্ক সন্ধানের মাধ্যমে বাজারের আচরণের মডেলিংয়ের একটি পদ্ধতি। প্রায়শই, দুটি বাজারের মধ্যে একটি পারস্পরিক সম্পর্ক গণনা করা হয়, এস এন্ড পি 500 এবং 30 বছরের মার্কিন ট্রেজারি বলে। এই গণনাগুলি প্রায়শই দামের তথ্যের ভিত্তিতে না হয়, যা প্রত্যেকের কাছে স্পষ্ট যে এটি স্থিতিকাল সিরিজের …

27 correlation  stationarity 

আমি আর-তে অ-লিনিয়ার মডেলগুলির তুলনা করতে এআইসি (আকাইকের তথ্য মানদণ্ড) ব্যবহার করছি। বিভিন্ন ধরণের মডেলের এআইসির তুলনা করা বৈধ? বিশেষত, আমি গ্লর্ম বনাম একটি মডেলের তুলনায় একটি মডেল তুলনা করছি যা গ্লમર (lme4) দ্বারা লাগানো একটি এলোমেলো প্রভাব শব্দটির সাথে রয়েছে। যদি তা না হয় তবে এরকম তুলনা করার কোনও …

27 lme4-nlme  model-selection  aic 

আরপিআর্ট (আর তে) ব্যবহার করে কার্ট মডেল (বিশেষত শ্রেণিবদ্ধকরণ গাছ) তৈরি করার সময়, মডেলটির সাথে পরিচিত বিভিন্ন ভেরিয়েবলগুলির গুরুত্ব কী তা জানা প্রায়শই আকর্ষণীয় is সুতরাং, আমার প্রশ্নটি: একটি কর্ট মডেলটিতে অংশগ্রহণকারী ভেরিয়েবলের পরিবর্তনশীল গুরুত্ব র‌্যাঙ্কিং / পরিমাপের জন্য কোন সাধারণ ব্যবস্থা বিদ্যমান? আর কীভাবে এটি আর এর সাহায্যে গণনা …

27 r  classification  model-selection  cart  rpart 

লক । এই প্রশ্নটি এবং এর উত্তরগুলি লক করা আছে কারণ প্রশ্নটি অফ-টপিক তবে historicalতিহাসিক তাত্পর্যপূর্ণ। এটি বর্তমানে নতুন উত্তর বা মিথস্ক্রিয়া গ্রহণ করছে না। আমি ভাবছিলাম কি আর-তে প্রতীকী গণনা করা সম্ভব? উদাহরণ স্বরূপ, আমি আশা করছিলাম যে 3 ডি গাউসিয়ান বিতরণের একটি প্রতীকী কোভেরিয়েন্স ম্যাট্রিক্সের বিপরীতটি পেতে পারি। …

27 r