প্রশ্ন ট্যাগ «bigdata»

বিগ ডেটা হ'ল ডেটা সংগ্রহের শব্দটি এত বড় এবং জটিল সেট করে যে অন-হ্যান্ড ডাটাবেস পরিচালন সরঞ্জামগুলি বা traditionalতিহ্যগত ডেটা প্রসেসিং অ্যাপ্লিকেশনগুলি ব্যবহার করে প্রক্রিয়া করা কঠিন হয়ে পড়ে। চ্যালেঞ্জগুলির মধ্যে ক্যাপচার, ক্রুশন, স্টোরেজ, অনুসন্ধান, ভাগ করে নেওয়া, স্থানান্তর, বিশ্লেষণ এবং ভিজ্যুয়ালাইজেশন অন্তর্ভুক্ত রয়েছে।

8
পাইথন কি বড় ডেটার জন্য উপযুক্ত?
আমি এই পোস্টে পড়েছি বড় ডেটা যে বিগ ডেটা গঠনের জন্য উপযুক্ত ভাষা5TB এবং এটি যখন এই ধরণের ডেটা নিয়ে কাজ করার সম্ভাব্যতা সম্পর্কে তথ্য সরবরাহ করার একটি ভাল কাজ করে তবে সে সম্পর্কে Rখুব কম তথ্য সরবরাহ করে Python। আমি ভাবছিলাম যে Pythonএই আরও ডেটা পাশাপাশি কাজ করতে পারেন।
14 bigdata  python 
1
যখন কোনও রিলেশনাল ডাটাবেসের কোনও সম্পর্কযুক্তের চেয়ে ভাল পারফরম্যান্স থাকে
মাইএসকিউএলের মতো কোনও রিলেশনাল ডাটাবেস যখন মঙ্গোডিবি-র মতো কোনও সম্পর্কযুক্তের চেয়ে ভাল পারফরম্যান্স করে? কোরা অন্য দিন কেন মাইএসকিউএলকে তাদের ব্যাকএন্ড হিসাবে ব্যবহার করে এবং তাদের পারফরম্যান্সটি এখনও ভাল তা সম্পর্কে আমি অন্য দিন কোওরায় একটি প্রশ্ন দেখেছি।
4
বড় ডেটা কেস স্টাডি বা কেস উদাহরণ ব্যবহার করুন
আমি প্রচুর ব্লগ পড়েছি different বিভিন্ন ধরণের শিল্প কীভাবে বিগ ডেটা অ্যানালিটিক ব্যবহার করছে সে সম্পর্কে নিবন্ধ। তবে এই নিবন্ধগুলির বেশিরভাগই উল্লেখ করতে ব্যর্থ এই সংস্থাগুলি কী কী ডেটা ব্যবহার করেছিল। তথ্য আকার ছিল কি ডেটা প্রক্রিয়া করার জন্য তারা কী ধরণের সরঞ্জাম প্রযুক্তি ব্যবহার করেছিল তারা কী সমস্যার মুখোমুখি …
4
আমরা কী ওয়ার্ড টুভেক মডেলদের প্রশিক্ষণ দেওয়ার সময় ট্রান্সফার শেখার সুবিধাটি নিতে পারি?
আমি গুগল নিউজ ডেটা ইত্যাদির মতো ইতিমধ্যে প্রশিক্ষিত মডেলগুলির প্রাক-প্রশিক্ষিত ওজনগুলি সন্ধান করতে চাই I সুতরাং, আমি স্থানান্তর শেখার থেকে সুবিধা নিতে চাই যাতে আমি প্রাক-প্রশিক্ষিত স্তর ওজন পেতে এবং আমার ডোমেনের নির্দিষ্ট শব্দগুলিতে সেই ওজনগুলি পুনরায় প্রশিক্ষণ করতে সক্ষম হতে পারি। সুতরাং, অবশ্যই প্রশিক্ষণে তুলনামূলকভাবে কম সময় লাগবে। যে …
7
ডেটা বিজ্ঞানীর একটি 'পুরাতন নাম' কী?
'ডেটা সায়েন্স' এবং 'ডেটা সায়েন্টিস্ট' এর মতো পদগুলি আজকাল ক্রমবর্ধমান ব্যবহৃত হচ্ছে। অনেক সংস্থা 'তথ্য বিজ্ঞানী' নিয়োগ করছে। তবে আমি মনে করি না এটি সম্পূর্ণ নতুন কাজ। অতীত থেকে ডেটা বিদ্যমান ছিল এবং কারও কাছে ডেটা নিয়ে কাজ করতে হয়েছিল। আমার ধারণা 'ডেটা সায়েন্টিস্ট' শব্দটি আরও জনপ্রিয় হয়ে উঠেছে কারণ …
12 bigdata 
2
পছন্দসই মিলটি অ্যালগরিদম
এই পাশের প্রকল্পটি আমি কাজ করছি যেখানে আমাকে নিম্নলিখিত সমস্যার সমাধানের কাঠামো তৈরি করতে হবে। আমার দুটি গ্রুপ (ক্লায়েন্ট) রয়েছে। গোষ্ঠী ক্রয় Aকরতে ইচ্ছুক এবং গোষ্ঠী Bএকটি নির্ধারিত পণ্য বিক্রয় করার ইচ্ছা করে X। পণ্যটির বৈশিষ্ট্যগুলির একটি ধারা রয়েছে x_iএবং আমার উদ্দেশ্য হল তাদের পছন্দগুলির সাথে Aএবং এর সাথে Bমিলে …
2
ঝড় এবং হাদোপের (মানচিত্রের) মধ্যে বাণিজ্য
ডেটা প্রসেসিংয়ের জন্য হাডোপ ক্লাস্টারে স্টর্ম এবং ম্যাপ্রেডিউসের মধ্যে বেছে নেওয়ার সময় কেউ কি দয়া করে আমাকে জড়িত ট্রেড-অফগুলি সম্পর্কে দয়া করে বলতে পারেন? অবশ্যই, স্পষ্টত একটিকে বাদ দিয়ে, হ্যাডোপ (একটি হ্যাডোপ ক্লাস্টারে ম্যাপ্রেডিউসের মাধ্যমে প্রক্রিয়াজাতকরণ) একটি ব্যাচ প্রসেসিং সিস্টেম এবং স্টর্ম হ'ল রিয়েল-টাইম প্রসেসিং সিস্টেম। আমি হ্যাডোপ ইকো সিস্টেমের …
3
কীভাবে একটি বিশাল ডাটাবেসে কোনও ক্যোয়ারী নগণ্য বিলম্ব সহ ফিরে আসে?
উদাহরণস্বরূপ, গুগলে কোনও কিছু অনুসন্ধান করার সময়, ফলাফলগুলি তাত্ক্ষণিকভাবে ফিরে আসে। আমি বুঝতে পেরেছি যে গুগল অ্যালগোরিদম ইত্যাদির সাথে পৃষ্ঠাগুলি বাছাই করে এবং সূচনা করে তবে প্রতিটি একক সম্ভাব্য ক্যোয়ারির ফলাফলের সূচীকরণের জন্য এটি অপরিহার্য কল্পনা করি (এবং ফলাফলগুলি ব্যক্তিগতকৃত হয়, যা এটি আরও বেশি অক্ষম রেন্ডার করে)? তদুপরি, গুগলের …
12 bigdata  google  search 
1
আমার কয়টি এলএসটিএম সেল ব্যবহার করা উচিত?
আমার ব্যবহার করা উচিত ন্যূনতম, সর্বাধিক এবং "যুক্তিসঙ্গত" পরিমাণগুলির সাথে সম্পর্কিত কোনও নিয়ামক (বা প্রকৃত নিয়ম) কি আছে? বিশেষত আমি টেনসরফ্লো এবং num_unitsসম্পত্তি থেকে বেসিকএলএসটিএমসেল সম্পর্কিত করছি । অনুগ্রহ করে ধরে নিই যে আমার দ্বারা শ্রেণিবদ্ধকরণের সমস্যা রয়েছে: t - number of time steps n - length of input vector …
12 rnn  machine-learning  r  predictive-modeling  random-forest  python  language-model  sentiment-analysis  encoding  machine-learning  deep-learning  neural-network  dataset  caffe  classification  xgboost  multiclass-classification  unbalanced-classes  time-series  descriptive-statistics  python  r  clustering  machine-learning  python  deep-learning  tensorflow  machine-learning  python  predictive-modeling  probability  scikit-learn  svm  machine-learning  python  classification  gradient-descent  regression  research  python  neural-network  deep-learning  convnet  keras  python  tensorflow  machine-learning  deep-learning  tensorflow  python  r  bigdata  visualization  rstudio  pandas  pyspark  dataset  time-series  multilabel-classification  machine-learning  neural-network  ensemble-modeling  kaggle  machine-learning  linear-regression  cnn  convnet  machine-learning  tensorflow  association-rules  machine-learning  predictive-modeling  training  model-selection  neural-network  keras  deep-learning  deep-learning  convnet  image-classification  predictive-modeling  prediction  machine-learning  python  classification  predictive-modeling  scikit-learn  machine-learning  python  random-forest  sampling  training  recommender-system  books  python  neural-network  nlp  deep-learning  tensorflow  python  matlab  information-retrieval  search  search-engine  deep-learning  convnet  keras  machine-learning  python  cross-validation  sampling  machine-learning 
2
ঘন ঘন নিদর্শন খননে এখনও এফপিগ্রোথকে "শিল্পের রাজ্য" হিসাবে বিবেচনা করা হয়?
যতদূর আমি ঘন ঘন প্যাটার্ন মাইনিং (এফপিএম) সমস্যা সমাধানের জন্য অ্যালগরিদমগুলির বিকাশ জানি, উন্নতির রাস্তায় কয়েকটি প্রধান চেকপয়েন্ট রয়েছে। প্রথমত, এগ্রিওরি অ্যালগরিদম 1993 সালে অগ্রওয়াল এট আল দ্বারা প্রস্তাবিত হয়েছিল । সমস্যাটির আনুষ্ঠানিককরণের পাশাপাশি। অ্যালগরিদম ডেটা বজায় রাখার জন্য একটি ল্যাটিস ব্যবহার করে সেটগুলি (পাওয়ারসেট) থেকে কিছু সেট স্ট্রিপ-অফ করতে …
4
এইচপিসি ক্লাস্টারগুলির সাথে কাজ করা
আমার বিশ্ববিদ্যালয়ে, আমাদের একটি এইচপিসি কম্পিউটিং ক্লাস্টার রয়েছে। ক্লাস্টিফায়ার ইত্যাদি প্রশিক্ষণের জন্য আমি ক্লাস্টারটি ব্যবহার করি। সুতরাং, সাধারণত, ক্লাস্টারে একটি কাজ প্রেরণের জন্য, (উদাহরণস্বরূপ পাইথন সাইকিট-লার্ন স্ক্রিপ্ট), আমাকে বাশ স্ক্রিপ্ট লিখতে হবে যাতে (অন্যদের মধ্যে) মতো একটি কমান্ড থাকে qsub script.py। তবে আমি এই প্রক্রিয়াটি খুব হতাশাবোধ করি। সাধারণত যা …
3
বৈজ্ঞানিক গণনার জন্য সেরা ভাষা [বন্ধ]
বন্ধ । এই প্রশ্নটি আরও ফোকাস করা প্রয়োজন । এটি বর্তমানে উত্তর গ্রহণ করছে না। এই প্রশ্নটি উন্নত করতে চান? প্রশ্নটি আপডেট করুন যাতে এটি কেবলমাত্র এই পোস্টটি সম্পাদনা করে একটি সমস্যার উপর দৃষ্টি নিবদ্ধ করে । 5 বছর আগে বন্ধ । দেখে মনে হয় বেশিরভাগ ভাষায় বেশ কয়েকটি বৈজ্ঞানিক …
10 efficiency  statistics  tools  knowledge-base  machine-learning  neural-network  deep-learning  optimization  hyperparameter  machine-learning  time-series  categorical-data  logistic-regression  python  visualization  bigdata  efficiency  classification  binary  svm  random-forest  logistic-regression  data-mining  sql  experiments  bigdata  efficiency  performance  scalability  distributed  bigdata  nlp  statistics  education  knowledge-base  definitions  machine-learning  recommender-system  evaluation  efficiency  algorithms  parameter  efficiency  scalability  sql  statistics  visualization  knowledge-base  education  machine-learning  r  python  r  text-mining  sentiment-analysis  machine-learning  machine-learning  python  neural-network  statistics  reference-request  machine-learning  data-mining  python  classification  data-mining  bigdata  usecase  apache-hadoop  map-reduce  aws  education  feature-selection  machine-learning  machine-learning  sports  data-formats  hierarchical-data-format  bigdata  apache-hadoop  bigdata  apache-hadoop  python  visualization  knowledge-base  classification  confusion-matrix  accuracy  bigdata  apache-hadoop  bigdata  efficiency  apache-hadoop  distributed  machine-translation  nlp  metadata  data-cleaning  text-mining  python  pandas  machine-learning  python  pandas  scikit-learn  bigdata  machine-learning  databases  clustering  data-mining  recommender-system 
3
কোনটি দ্রুত: বড় JSON ডেটাসেটে পোস্টগ্রিজ এসকিউএল বনাম মংগোডিবি?
আমার কাছে প্রতি 3। 300 বাইটে 9 মি JSON অবজেক্ট সহ একটি বড় ডেটাসেট রয়েছে। এগুলি লিঙ্ক একগ্রিগেটরের পোস্ট: মূলত লিঙ্কগুলি (একটি ইউআরএল, শিরোনাম এবং লেখক আইডি) এবং মন্তব্যসমূহ (পাঠ্য এবং লেখকের আইডি) + মেটাডেটা। তারা একটি টেবিলে খুব ভাল সম্পর্কযুক্ত রেকর্ড হতে পারে, আইডি সহ শিশুদের রেকর্ডের দিকে ইঙ্গিত …
2
স্কেলেবল আউটলেটর / অ্যানোমালি সনাক্তকরণ
আমি হ্যাডোপ, হাইভ, ইলাস্টিক অনুসন্ধান (অন্যদের মধ্যে) ব্যবহার করে একটি বড় ডেটা অবকাঠামো সেটআপ করার চেষ্টা করছি এবং আমি নির্দিষ্ট ডেটাসেটের উপরে কিছু অ্যালগরিদম চালাতে চাই। আমি চাই যে অ্যালগোরিদমগুলি সেগুলি নিজেরাই মাপযোগ্য। এ্যাপাচি মাহুত লাইব্রেরী একটি ভালো বিকল্প আছে বলে মনে হয়, এবং এটি অতিরিক্ত বৈশিষ্ট্যগুলিও উপস্থিত রয়েছে রিগ্রেশন …
3
নমুনা আকার এবং মাত্রা সহ বিভিন্ন পরিসংখ্যান কৌশল (রিগ্রেশন, পিসিএ, ইত্যাদি) কীভাবে স্কেল করে?
পরিসংখ্যান কৌশলগুলির একটি সাধারণ সাধারণ টেবিল রয়েছে যা ব্যাখ্যা করে যে তারা কীভাবে নমুনার আকার এবং মাত্রা দিয়ে স্কেল করে? উদাহরণস্বরূপ, আমার এক বন্ধু আমাকে অন্য দিন জানিয়েছিল যে আকারের একটি মাত্রিক ডেটা কেবল তাত্ক্ষণিকভাবে গণনার সময় n * লগ (এন) হিসাবে যায়। সুতরাং, উদাহরণস্বরূপ, যদি আমরা এক্স এর বিপরীতে …
আমাদের সাইট ব্যবহার করে, আপনি স্বীকার করেছেন যে আপনি আমাদের কুকি নীতি এবং গোপনীয়তা নীতিটি পড়েছেন এবং বুঝতে পেরেছেন ।
Licensed under cc by-sa 3.0 with attribution required.