পরিসংখ্যান এবং বড় তথ্য

অন্যান্য মেশিন লার্নিং অ্যালগরিদমের তুলনায় আমি নিউরাল নেটওয়ার্কগুলি এবং তাদের সুবিধাগুলি সম্পর্কে আমার বোঝার উন্নতি করতে চাই। আমার বোঝা নীচের মত এবং আমার প্রশ্নটি হ'ল: আপনি দয়া করে আমার বোঝার সংশোধন ও পরিপূরক করতে পারেন? :) আমার বোঝার: (1) কৃত্রিম নিউরাল নেটওয়ার্কগুলি = একটি ফাংশন, যা ইনপুট মানগুলি থেকে আউটপুট …

11 regression  machine-learning 

ইয়ান গুডফেলির বই ডিপ লার্নিংয়ে আমি এমন কিছু পড়লাম । নিউরাল নেটওয়ার্কগুলির প্রসঙ্গে, "L2 প্যারামিটার আদর্শ শাস্তি সাধারণত ওজন ক্ষয় হিসাবে পরিচিত This স্পেসে "তবে শূন্যের দিকে মডেল পরামিতিগুলিকে নিয়মিত করা আরও বেশি সাধারণ। (ডিপ লার্নিং, গুডফেলো ইত্যাদি) আমি উৎসুক. আমি বুঝতে পারি যে কেবলমাত্র আমাদের ব্যয় কার্যক্রমে একটি নিয়মিত …

11 machine-learning  neural-networks  deep-learning  regularization 

আমি কলমান ফিল্টারটি খুব স্ট্যান্ডার্ড উপায়ে ব্যবহার করছি। সিস্টেম রাষ্ট্র সমীকরণ দ্বারা প্রতিনিধিত্ব করা হয় এবং পর্যবেক্ষণ সমীকরণ ।xt+1=Fxt+vt+1xt+1=Fxt+vt+1x_{t+1}=Fx_{t}+v_{t+1}yt=Hxt+Azt+wtyt=Hxt+Azt+wty_{t}=Hx_{t}+Az_{t}+w_{t} পাঠ্যপুস্তকগুলি শিখিয়েছে যে কলম্যান ফিল্টার প্রয়োগ করার পরে এবং "এক-পদক্ষেপের পূর্বাভাস" (বা "ফিল্টার করা প্রাক্কলন") পাওয়ার পরে, আমাদের সেগুলি সম্ভাবনা ফাংশন গণনা করার জন্য ব্যবহার করা উচিত:x^t|t−1x^t|t−1\hat{x}_{t|t-1} fyt|It−1,zt(yt|It−1,zt)=det[2π(HPt|t−1H′+R)]−12exp{−12(yt−Hx^t|t−1−Azt)′(HPt|t−1H′+R)−1(yt−Hx^t|t−1−Azt)}fyt|It−1,zt(yt|It−1,zt)=det[2π(HPt|t−1H′+R)]−12exp⁡{−12(yt−Hx^t|t−1−Azt)′(HPt|t−1H′+R)−1(yt−Hx^t|t−1−Azt)}f_{y_{t}|\mathcal{I}_{t-1},z_{t}}\left(y_{t}|\mathcal{I}_{t-1},z_{t}\right)=\det\left[2\pi\left(HP_{t|t-1}H^{\prime}+R\right)\right]^{-\frac{1}{2}}\exp\left\{ -\frac{1}{2}\left(y_{t}-H\hat{x}_{t|t-1}-Az_{t}\right)^{\prime}\left(HP_{t|t-1}H^{\prime}+R\right)^{-1}\left(y_{t}-H\hat{x}_{t|t-1}-Az_{t}\right)\right\} আমার প্রশ্ন: …

11 likelihood  kalman-filter 

আমি জানি যে কীভাবে গড় 0 সহ একটি ±1±1\pm 1 ক্রম তৈরি করা যায় । উদাহরণ হিসেবে বলা যায়, মতলব, যদি আমি একটি জেনারেট করতে চান ± 1 দৈর্ঘ্যের ক্রম 10000 , এটা হল:000±1±1\pm 1100001000010000 2*(rand(1, 10000, 1)<=.5)-1 যাইহোক, কিভাবে জেনারেট করতে ±1±1\pm 1 গড় সঙ্গে ক্রম 0.050.050.05 , অর্থাত্, …

11 distributions  sampling  random-generation 

আমার যদি দুটি স্বতন্ত্র এলোমেলো ভেরিয়েবল এক্স এবং ওয়াই থাকে তবে এক্স এবং পণ্য এক্সওয়াইয়ের মধ্যে পারস্পরিক সম্পর্ক কী? এটি যদি অজানা থাকে তবে এক্স এবং ওয়াইয়ের স্বাভাবিক ক্ষেত্রে শূন্যের সাথে স্বাভাবিক হওয়ার ক্ষেত্রে কী ঘটেছিল তা আমি কমপক্ষে জানার আগ্রহী, যদি এটি সমাধান করা সহজ হয়।

11 correlation 

রিজ বা লাসোতে নিয়মিতকরণ পরামিতি ল্যাম্বদা নির্বাচন করার ক্ষেত্রে প্রস্তাবিত পদ্ধতিটি ল্যাম্বদার বিভিন্ন মান চেষ্টা করে, বৈধতা সেটটিতে ত্রুটিটি পরিমাপ করে এবং অবশেষে লাম্বদার সেই মানটি বেছে নেয় যা সর্বনিম্ন ত্রুটি প্রদান করে। যদি ফ (ল্যাম্বদা) ফাংশন = ত্রুটি উত্তল হয় তবে এটি আমার কাছে ক্লিট হয় না। এটা কি …

11 cross-validation  error  regularization  validation  optimization 

আমি একজন পদার্থবিজ্ঞানের ছাত্র যিনি মেশিন লার্নিং / ডেটা সায়েন্স অধ্যয়ন করে যাচ্ছি তাই আমি এই প্রশ্নটির কোনও বিবাদ শুরু করার অর্থ বোঝাতে চাই না :) যাইহোক, কোনও পদার্থবিজ্ঞানের আন্ডারগ্রাজুয়েট প্রোগ্রামের একটি বড় অংশ ল্যাব / পরীক্ষা-নিরীক্ষা করা, যার অর্থ প্রচুর ডেটা প্রক্রিয়াজাতকরণ এবং পরিসংখ্যান বিশ্লেষণ। তবে পদার্থবিজ্ঞানীরা যেভাবে ডেটা …

11 regression  machine-learning  cross-validation  dataset  experiment-design 

যৌথ এনট্রপির উপর পারস্পরিক তথ্যগুলি: 0 ≤ আই( এক্স, Y)এইচ( এক্স, Y)। 10≤I(X,Y)H(X,Y)≤1 0 \leq \frac{I(X,Y)}{H(X,Y)} \leq 1 হিসাবে সংজ্ঞায়িত করা হবে: "এক্স থেকে ওয়াইতে কোনও টুকরো তথ্য পৌঁছানোর সম্ভাবনা"? আমি এতটা নিখুঁত হওয়ার জন্য দুঃখিত, তবে আমি কখনই তথ্য তত্ত্বটি অধ্যয়ন করি নি, এবং আমি এর কিছু ধারণাগুলি বোঝার …

11 information-theory  mutual-information 

হাইপোথিসিস পরীক্ষাটি একটি শ্রেণিবিন্যাস সমস্যার অনুরূপ। সুতরাং বলুন, আমাদের কাছে একটি পর্যবেক্ষণ (বিষয়) - এর জন্য দুটি সম্ভাব্য লেবেল রয়েছে - গুনিটি বনাম অ-অপরাধী। অ-অপরাধীকে নাল হাইপোথেসিস হতে দিন। যদি আমরা কোনও শ্রেণিবদ্ধ দৃষ্টিভঙ্গি থেকে সমস্যাটি দেখি তবে আমরা একটি শ্রেণিবদ্ধ প্রশিক্ষণ দেব যা ডেটা প্রদত্ত, 2 টি শ্রেণীর প্রত্যেকের …

11 probability  hypothesis-testing  classification  p-value 

আমার এফ টেবিলের স্বাধীনতার ডিগ্রিগুলি আমার বড় নমুনার জন্য যথেষ্ট পরিমাণে উপরে যায় না। উদাহরণস্বরূপ, যদি আমার 5 এবং 6744 ডিগ্রি স্বাধীনতার সাথে এফ থাকে, তবে আমি কোনও আনোভা-র 5% সমালোচনা মানটি কীভাবে খুঁজে পাব? আমি যদি স্বাধীনতার বড় ডিগ্রি নিয়ে একটি চি-স্কোয়ার পরীক্ষা করছিলাম তবে কী হবে? [এর মতো …

11 chi-squared  degrees-of-freedom  f-distribution  tables 

এক বাক্যে প্রশ্ন: কেউ কি এলোমেলো বনের জন্য ভাল বর্গ ওজন নির্ধারণ করতে জানেন? ব্যাখ্যা: আমি ভারসাম্যহীন ডেটাসেট নিয়ে ঘুরে বেড়াচ্ছি। আমি খুব কম ইতিবাচক উদাহরণ এবং অনেক নেতিবাচক উদাহরণ সহ খুব স্কিউড ডেটাসেটে কোনও মডেলকে প্রশিক্ষণের জন্য Rপ্যাকেজটি ব্যবহার করতে চাই randomForest। আমি জানি, অন্যান্য পদ্ধতি আছে এবং শেষ …

11 r  random-forest 

নেটফ্লিক্স তার পরামর্শগুলি ব্যবহার করে অন্যান্য মুভি / শোগুলির জমা দেওয়া রেটিংয়ের উপর ভিত্তি করে ব্যবহার করে। এই রেটিং সিস্টেমটিতে পাঁচটি তারা ছিল। এখন, নেটফ্লিক্স ব্যবহারকারীদের পছন্দ / অপছন্দ (থাম্বস-আপ / থাম্বস-ডাউন) সিনেমা / শো করতে দেয়। তারা দাবি করে যে সিনেমাগুলি রেট করা সহজ। এই দ্বি-মুখী শ্রেণিবিন্যাসটি 5-ওয়ে শ্রেণিবদ্ধকরণ …

11 variance  predictive-models  prediction 

আমি বিএসটিএস আর প্যাকেজ সম্পর্কে স্টিভেন স্কটের স্লাইডগুলি পড়ছি (আপনি সেগুলি এখানে পেতে পারেন: স্লাইডগুলি )। এক পর্যায়ে যখন স্ট্রাকচারাল টাইম সিরিজের মডেলটিতে অনেক রেজিস্ট্রারকে অন্তর্ভুক্ত করার বিষয়ে কথা বলার সময় তিনি রিগ্রেশন সহগের স্পাইক এবং স্ল্যাব প্রিয়ারদের পরিচয় করিয়ে দেন এবং বলেছিলেন যে দণ্ডিত পদ্ধতির তুলনায় এগুলি আরও ভাল। …

11 r  bayesian  feature-selection  penalized  bsts 

আমি একটি কৃস্কাল ওয়ালিস পরীক্ষা চালিয়েছি এবং কিছু প্রশ্নের জন্য পি মানটি তাত্পর্যপূর্ণ নয়। ডিএফ, পরীক্ষার পরিসংখ্যান এবং পি-মান উল্লেখ করে আমি কি এটির মতো একইভাবে রিপোর্ট করব? সুতরাং এটি এমন কিছু হবে যেমন একটি কৃস্কাল ওয়ালিস পরীক্ষা অনুষ্ঠিত হয়েছিল তবে ফলাফলগুলি উল্লেখযোগ্য এইচ (3) = 2.119, পি> 0.05 (বা …

11 spss  kruskal-wallis  reporting 

বদ্ধ আকারে কোনও অবিচ্ছিন্ন বিতরণ প্রকাশযোগ্য, যার অর্থটি এমন যে নমুনাগুলির জ্যামিতিক গড়টি সেই অর্থের জন্য একটি নিরপেক্ষ অনুমানক? আপডেট: আমি কেবল বুঝতে পেরেছি যে আমার নমুনাগুলিগুলি ইতিবাচক হতে হবে (অন্যথায় জ্যামিতিক গড়ের অস্তিত্ব থাকতে পারে) তাই সম্ভবত ধারাবাহিকটি সঠিক শব্দ নয়। র্যান্ডম ভেরিয়েবলের নেতিবাচক মানের জন্য শূন্য এবং ধনাত্মক …

11 distributions  geometric-mean