তথ্য বিজ্ঞান

আমি অনেকবার এমন একটি ডেটাসেট বিশ্লেষণ করেছি যার উপরে আমি সত্যিই কোনও শ্রেণিবদ্ধকরণ করতে পারি নি। আমি শ্রেণিবদ্ধ পেতে পারি কিনা তা দেখার জন্য আমি সাধারণত নিম্নলিখিত পদক্ষেপগুলি ব্যবহার করেছি: সংখ্যাগত মানের বিপরীতে লেবেলের বাক্স প্লট তৈরি করুন। ক্লাস পৃথকযোগ্য কিনা তা দেখতে মাত্রিকতা 2 বা 3 এ হ্রাস করুন, …

11 machine-learning  classification  deep-learning  class-imbalance  bayes-error 

আমি কিছুক্ষণের জন্য মেশিন লার্নিং এবং বায়োইনফরম্যাটিকসে কাজ করছি এবং আজ ডেটা মাইনিংয়ের মূল সাধারণ বিষয়গুলি সম্পর্কে আমার একজন সহকর্মীর সাথে আলাপ হয়েছিল। আমার সহকর্মী (যিনি একটি মেশিন লার্নিং বিশেষজ্ঞ) বলেছিলেন যে, তাঁর মতে, মেশিন লার্নিংয়ের তর্কযোগ্যভাবে সবচেয়ে গুরুত্বপূর্ণ ব্যবহারিক দিকটি হ'ল কীভাবে বুঝতে হবে যে আপনি নিজের মেশিন লার্নিং …

11 machine-learning  data-mining  dataset  data-cleaning  data 

আমি বর্তমানে বিগ ডেটাতে একটি কাগজ নিচ্ছি যা আমাদের ডাটা বিশ্লেষণের জন্য আর ব্যবহার করে। গেমিংয়ের কারণে আমার পিসিতে একটি জিটিএক্স 1070 রয়েছে। সুতরাং, আমি ভেবেছিলাম যে আমার বক্তৃতাবিদরা আমাকে যে জিনিসগুলি করছেন তার কিছু প্রক্রিয়াজাতকরণের গতি বাড়ানোর জন্য যদি এটি ব্যবহার করতে পারি তবে এটি সত্যিই দুর্দান্ত হবে but …

11 r  gpu  parallel 

এই দুটি সমাবর্তন ক্রিয়াকলাপ এখনই গভীর শিক্ষার ক্ষেত্রে খুব সাধারণ। আমি এই গবেষণাপত্রে প্রসারণযুক্ত সমঝোতা স্তর সম্পর্কে পড়লাম: ওয়েভেনেট: র অডিওর জন্য একটি জেনারেটাল মডেল এবং ডি-কনভ্যুলশনটি এই কাগজে রয়েছে: সিমান্টিক সেগমেন্টেশনের জন্য সম্পূর্ণ কনভোলিউশনাল নেটওয়ার্ক উভয়ই চিত্রটিকে আপ-নমুনা বলে মনে হচ্ছে তবে পার্থক্য কী?

11 machine-learning  deep-learning  convnet  computer-vision  convolution 

তথ্য অন্তর্ভুক্তী: -> টি শার্টের বৈশিষ্ট্য (রঙ, লোগো ইত্যাদি)XXX -> লাভের মার্জিনYYY আমি উপরের এবং ওয়াই এ এলোমেলোভাবে বন প্রশিক্ষিত করেছি এবং পরীক্ষার ডেটাতে যুক্তিসঙ্গত নির্ভুলতা অর্জন করেছি। সুতরাং, আমি আছেXXXYYY ।P(Y|X)P(Y|X)P(Y|X) এখন, আমি খুঁজে পেতে চাই অর্থাৎ এক্স বৈশিষ্ট্যগুলির সম্ভাব্যতা বন্টন প্রদত্ত আমি এই লাভের প্রান্তিকের প্রত্যাশা করছি।P(X|Y)P(X|Y)P(X|Y)XXX আমি …

11 machine-learning  random-forest  generative-models 

আমি বর্তমানে একটি বড় সিএসভি ফাইলে (> GB০ গিগাবাইটেরও বেশি সারি সহ 70০ জিবি) একটি মডেলকে প্রশিক্ষণের চেষ্টা করছি। এটি করার জন্য আমি tf.contrib.learn.read_batch_example ব্যবহার করছি। আমি এই ফাংশনটি কীভাবে ডেটা পড়ে তা বোঝার জন্য লড়াই করছি। যদি আমি ব্যাচ আকারটি উদাহরণস্বরূপ 50.000 ব্যবহার করছি তবে এটি ফাইলের প্রথম 50.000 …

11 python  tensorflow 

আমি টেনসরফ্লো ব্যবহার করে একটি সাধারণ স্নায়বিক নেটওয়ার্ক তৈরি করছি, আমি নিজেই ডেটা সংগ্রহ করেছিলাম, তবে এটি সহযোগিতা করছে না: পিআই এমন একটি ত্রুটির মধ্যে পড়েছে যা আমি ঠিক করতে পারি না বা এর সমাধানটি খুঁজে পাই না এবং আমি আপনার সাহায্য পছন্দ করব। ত্রুটিমাখা: প্রকারের ত্রুটি: 2861.6152 এর 2861.6152 …

11 machine-learning  python  neural-network  tensorflow 

আমার কাছে "গভীর র্যাঙ্কিংয়ের সাথে সূক্ষ্ম-দানাযুক্ত চিত্রের সাদৃশ্য শেখা" কাগজটি থেকে নেটওয়ার্ক আর্কিটেকচার রয়েছে এবং লিনিয়ার এম্বেডিং স্তরটি ব্যবহার করে তিনটি সমান্তরাল নেটওয়ার্ক থেকে আউটপুট কীভাবে একত্রিত করা যায় তা আমি বুঝতে অক্ষম। এই স্তরটিতে প্রদত্ত একমাত্র তথ্যটি কাগজে রয়েছে অবশেষে, আমরা তিনটি অংশ থেকে এম্বেডিংগুলিকে সাধারণকরণ করি এবং এগুলিকে …

11 neural-network  deep-network 

আমি একটি সাধারণ চ্যাটবট তৈরি করছি। আমি ব্যবহারকারীর প্রতিক্রিয়া থেকে তথ্য পেতে চাই। উদাহরণ উদাহরণ: Bot : Hi, what is your name? User: My name is Edwin. আমি বাক্য থেকে এডউইন নামটি বের করতে চাই। তবে ব্যবহারকারী বিভিন্নভাবে প্রতিক্রিয়া জানাতে পারে User: Edwin is my name. User: I am Edwin. …

11 python  nlp 

এই সংজ্ঞাটি পুরোপুরি প্রয়োগ হয় না কারণ আমরা সবসময় অন্তর্নিহিত বিতরণটি ধরে নিই না। সুতরাং একটি মডেল আসলে কি? নির্দিষ্ট হাইপারপ্যারামিটার সহ একটি জিবিএমকে কী মডেল হিসাবে বিবেচনা করা যেতে পারে? কোনও মডেল কি বিধিগুলির সংকলন?

11 machine-learning 

Matplotlib গ্রন্থাগার বিশেষত Jupyter নোটবুক ভিতরে খুব সক্ষম কিন্তু interactiveness অভাব আছে। আমি প্লট.লির মতো একটি ভাল অফলাইন প্লটিং সরঞ্জাম চাই ।

11 python  visualization  pca  jupyter 

ভবিষ্যতের ভবিষ্যদ্বাণী করার জন্য আপনি কী ধরণের বৈশিষ্ট্যগুলি শব্দের তালিকা থেকে নিষ্কাশনের চেষ্টা করবেন, এটি কি বিদ্যমান শব্দ বা কেবল অক্ষরের অগোছালো? আমি সেখানে পাওয়া টাস্কের বিবরণ রয়েছে । আপনাকে এমন একটি প্রোগ্রাম লিখতে হবে যা প্রদত্ত শব্দটি ইংরেজি কিনা উত্তর দিতে পারে। এটি সহজ হবে - আপনাকে অভিধানে শব্দটি …

11 machine-learning  nlp  text-mining  algorithms 

আমি নথি শ্রেণীবদ্ধ করার জন্য সিএনএন (কনভোলিউশনাল নিউরাল নেটওয়ার্ক) ব্যবহার করার চেষ্টা করছি। সংক্ষিপ্ত পাঠ / বাক্যগুলির জন্য সিএনএন অনেকগুলি গবেষণাপত্রে অধ্যয়ন করা হয়েছে। তবে মনে হয় কোনও কাগজই দীর্ঘ পাঠ্য বা নথির জন্য সিএনএন ব্যবহার করে নি। আমার সমস্যাটি হ'ল ডকুমেন্ট থেকে অনেকগুলি বৈশিষ্ট্য রয়েছে। আমার ডেটাসেটে, প্রতিটি নথিতে …

11 classification  neural-network  text-mining  convnet  word2vec 

অ্যামাজনের অ্যালেক্সা , ন্যুয়েন্সের মিক্স এবং ফেসবুকের উইট.ইই সমস্ত পাঠ্য কমান্ডকে কীভাবে অভিপ্রায় রূপান্তর করতে পারে তা নির্দিষ্ট করার জন্য একই ধরণের সিস্টেম ব্যবহার করে - যেমন কোনও কম্পিউটার বুঝতে পারে। আমি নিশ্চিত নই যে এর "অফিসিয়াল" নামটি কী তবে আমি এটিকে "উদ্দেশ্য স্বীকৃতি" বলি। মূলত "দয়া করে আমার লাইটগুলি …

11 machine-learning  nlp 

আমি word2vec এ সম্পূর্ণ নতুন তাই আমার সাথে এটি সহ্য করুন। আমার কাছে প্রতিটি টেক্সট ফাইলের একটি সেট রয়েছে যা 1000-3000 এর মধ্যে একটি টুইটের সেট রয়েছে। আমি একটি সাধারণ কীওয়ার্ড ("kw1") বেছে নিয়েছি এবং ওয়ার্ড 2vec ব্যবহার করে "kw1" এর জন্য শব্দার্থগতভাবে প্রাসঙ্গিক পদগুলি খুঁজতে চাই। উদাহরণস্বরূপ কীওয়ার্ডটি যদি …

11 machine-learning  nlp  text-mining