তথ্য বিজ্ঞান text-mining

2

নৈতিক ও ব্যয়বহুলভাবে স্কেলিং ডেটা স্ক্র্যাপগুলি

জীবনের কিছু জিনিস আমাকে ইন্টারনেট থেকে কাঠামোগত এবং কাঠামোগত ডেটা স্ক্র্যাপ করা এবং এটি আমার মডেলগুলিতে ব্যবহার করার মতো আনন্দ দেয়। উদাহরণস্বরূপ, ডেটা সায়েন্স টুলকিট (বা RDSTKআর প্রোগ্রামারদের জন্য) আমাকে আইপি বা ঠিকানা ব্যবহার করে প্রচুর ভাল অবস্থান-ভিত্তিক ডেটা টানতে দেয় এবং tm.webmining.pluginআর এর tmপ্যাকেজটির জন্য আর্থিক এবং নিউজ ডেটা …

13 text-mining scraping

4

টিফ-আইডিএফ এবং কোসিন সাদৃশ্যগুলির বিকল্পগুলি যখন ভিন্ন ভিন্ন ফর্ম্যাটের ডকুমেন্টগুলির সাথে তুলনা করে

আমি একটি ছোট, ব্যক্তিগত প্রকল্পে কাজ করছি যা ব্যবহারকারীর কাজের দক্ষতা গ্রহণ করে এবং সেই দক্ষতার উপর ভিত্তি করে তাদের জন্য সবচেয়ে আদর্শ ক্যারিয়ারের পরামর্শ দেয়। আমি এটি অর্জনের জন্য কাজের তালিকার একটি ডাটাবেস ব্যবহার করি। এই মুহুর্তে কোডটি নিম্নলিখিতভাবে কাজ করে: 1) তালিকায় উল্লেখ করা দক্ষতাগুলি নিষ্ক্রিয় করতে প্রতিটি …

12 nlp text-mining similarity cosine-distance

3

কাঠামোগত কাঠামোগত শ্রেণিবদ্ধকরণ

আমি অপ্রচলিত টেক্সট ডকুমেন্টগুলি, অর্থাৎ অজানা কাঠামোর ওয়েব সাইটগুলিকে শ্রেণিবদ্ধ করতে যাচ্ছি। আমি যে শ্রেণিতে শ্রেণিবদ্ধ করছি তার সংখ্যা সীমিত (এই মুহুর্তে, আমি বিশ্বাস করি যে এখানে আরও তিনটির বেশি নেই)। আমি কীভাবে শুরু করতে পারি তার জন্য কারও কাছে কোনও পরামর্শ আছে? "শব্দের ব্যাগ" এখানে কি সম্ভব? পরে, আমি …

12 machine-learning classification text-mining beginner

2

পছন্দসই মিলটি অ্যালগরিদম

এই পাশের প্রকল্পটি আমি কাজ করছি যেখানে আমাকে নিম্নলিখিত সমস্যার সমাধানের কাঠামো তৈরি করতে হবে। আমার দুটি গ্রুপ (ক্লায়েন্ট) রয়েছে। গোষ্ঠী ক্রয় Aকরতে ইচ্ছুক এবং গোষ্ঠী Bএকটি নির্ধারিত পণ্য বিক্রয় করার ইচ্ছা করে X। পণ্যটির বৈশিষ্ট্যগুলির একটি ধারা রয়েছে x_iএবং আমার উদ্দেশ্য হল তাদের পছন্দগুলির সাথে Aএবং এর সাথে Bমিলে …

12 bigdata text-mining recommender-system

1

অক্ষর ক্রমটি ইংরেজি শব্দ বা গোলমাল কিনা তা কীভাবে নির্ধারণ করবেন

ভবিষ্যতের ভবিষ্যদ্বাণী করার জন্য আপনি কী ধরণের বৈশিষ্ট্যগুলি শব্দের তালিকা থেকে নিষ্কাশনের চেষ্টা করবেন, এটি কি বিদ্যমান শব্দ বা কেবল অক্ষরের অগোছালো? আমি সেখানে পাওয়া টাস্কের বিবরণ রয়েছে । আপনাকে এমন একটি প্রোগ্রাম লিখতে হবে যা প্রদত্ত শব্দটি ইংরেজি কিনা উত্তর দিতে পারে। এটি সহজ হবে - আপনাকে অভিধানে শব্দটি …

11 machine-learning nlp text-mining algorithms

2

কনভুলেশনাল নিউরাল নেটওয়ার্ক ব্যবহার করে ডকুমেন্টের শ্রেণিবিন্যাস

আমি নথি শ্রেণীবদ্ধ করার জন্য সিএনএন (কনভোলিউশনাল নিউরাল নেটওয়ার্ক) ব্যবহার করার চেষ্টা করছি। সংক্ষিপ্ত পাঠ / বাক্যগুলির জন্য সিএনএন অনেকগুলি গবেষণাপত্রে অধ্যয়ন করা হয়েছে। তবে মনে হয় কোনও কাগজই দীর্ঘ পাঠ্য বা নথির জন্য সিএনএন ব্যবহার করে নি। আমার সমস্যাটি হ'ল ডকুমেন্ট থেকে অনেকগুলি বৈশিষ্ট্য রয়েছে। আমার ডেটাসেটে, প্রতিটি নথিতে …

11 classification neural-network text-mining convnet word2vec

1

ছোট টেক্সট ফাইলগুলিতে word2vec প্রয়োগ করা হচ্ছে

আমি word2vec এ সম্পূর্ণ নতুন তাই আমার সাথে এটি সহ্য করুন। আমার কাছে প্রতিটি টেক্সট ফাইলের একটি সেট রয়েছে যা 1000-3000 এর মধ্যে একটি টুইটের সেট রয়েছে। আমি একটি সাধারণ কীওয়ার্ড ("kw1") বেছে নিয়েছি এবং ওয়ার্ড 2vec ব্যবহার করে "kw1" এর জন্য শব্দার্থগতভাবে প্রাসঙ্গিক পদগুলি খুঁজতে চাই। উদাহরণস্বরূপ কীওয়ার্ডটি যদি …

11 machine-learning nlp text-mining

3

একটি হ্যাশিং ভেক্টরাইজার এবং একটি টিফিড ভেক্টরাইজারের মধ্যে পার্থক্য কী

আমি প্রতিটি নথির জন্য পাঠ্য নথির একটি কর্পাসকে শব্দ ভেক্টরে রূপান্তর করছি। আমি এটি টিফিডভেক্টরাইজার এবং একটি হ্যাশিংভেক্টরাইজার ব্যবহার করে চেষ্টা করেছি আমি বুঝতে পারি যে একটি করণীয়গুলির মতো স্কোরগুলি HashingVectorizerবিবেচনা করে না। আমি এখানে এবং এখানে যেমন ব্যাখ্যা করেছি তেমনি বিশাল ডেটাসেটগুলির সাথে কাজ করার সময় এটি যে নমনীয়তাটি …

11 nlp scikit-learn text-mining tfidf

4

পাঠ্য প্রক্রিয়াকরণে ক্লাস্টারিং ব্যবহার করা

হাই, ডেটা সায়েন্স স্ট্যাকের মধ্যে এটি আমার প্রথম প্রশ্ন। আমি পাঠ্য শ্রেণিবিন্যাসের জন্য একটি অ্যালগরিদম তৈরি করতে চাই। ধরুন আমার কাছে টেক্সট এবং নিবন্ধগুলির একটি বিশাল সেট রয়েছে। প্রায় 5000 টি সরল পাঠ্য বলি। চারটি এবং উপরের অক্ষরের শব্দের ফ্রিকোয়েন্সি নির্ধারণ করতে আমি প্রথমে একটি সাধারণ ফাংশন ব্যবহার করি। আমি …

11 text-mining clustering

3

NER- র জন্য নিরীক্ষণযোগ্য বৈশিষ্ট্য শেখা

আমি সিআরএফ অ্যালগরিদম ব্যবহার করে আমার হস্তশিল্পের বৈশিষ্ট্যগুলির সাহায্যে NER সিস্টেমটি প্রয়োগ করেছি যা বেশ ভাল ফলাফল দিয়েছে। জিনিসটি হ'ল আমি পস ট্যাগ এবং লেমাসহ বিভিন্ন বৈশিষ্ট্য ব্যবহার করেছি। এখন আমি আলাদা ভাষার জন্য একই NER করতে চাই। এখানে সমস্যা হ'ল আমি পস ট্যাগ এবং লেমাস ব্যবহার করতে পারি না। …

11 nlp text-mining feature-extraction

3

বৈজ্ঞানিক গণনার জন্য সেরা ভাষা [বন্ধ]

বন্ধ । এই প্রশ্নটি আরও ফোকাস করা প্রয়োজন । এটি বর্তমানে উত্তর গ্রহণ করছে না। এই প্রশ্নটি উন্নত করতে চান? প্রশ্নটি আপডেট করুন যাতে এটি কেবলমাত্র এই পোস্টটি সম্পাদনা করে একটি সমস্যার উপর দৃষ্টি নিবদ্ধ করে । 5 বছর আগে বন্ধ । দেখে মনে হয় বেশিরভাগ ভাষায় বেশ কয়েকটি বৈজ্ঞানিক …

10 efficiency statistics tools knowledge-base machine-learning neural-network deep-learning optimization hyperparameter machine-learning time-series categorical-data logistic-regression python visualization bigdata efficiency classification binary svm random-forest logistic-regression data-mining sql experiments bigdata efficiency performance scalability distributed bigdata nlp statistics education knowledge-base definitions machine-learning recommender-system evaluation efficiency algorithms parameter efficiency scalability sql statistics visualization knowledge-base education machine-learning r python r text-mining sentiment-analysis machine-learning machine-learning python neural-network statistics reference-request machine-learning data-mining python classification data-mining bigdata usecase apache-hadoop map-reduce aws education feature-selection machine-learning machine-learning sports data-formats hierarchical-data-format bigdata apache-hadoop bigdata apache-hadoop python visualization knowledge-base classification confusion-matrix accuracy bigdata apache-hadoop bigdata efficiency apache-hadoop distributed machine-translation nlp metadata data-cleaning text-mining python pandas machine-learning python pandas scikit-learn bigdata machine-learning databases clustering data-mining recommender-system

1

পাঠ্য-শ্রেণিবদ্ধকরণ-সমস্যা: ওয়ার্ড 2ভেক / এনএন কি সেরা পদ্ধতির?

আমি এমন একটি সিস্টেম ডিজাইন করতে চাই যা পাঠ্যের অনুচ্ছেদে দেওয়া হয়েছে এটি শ্রেণীবদ্ধ করতে এবং প্রসঙ্গটি সনাক্ত করতে সক্ষম হবে: ব্যবহারকারী উত্পন্ন পাঠ্য অনুচ্ছেদ (মতামত / প্রশ্ন / উত্তর মত) দিয়ে প্রশিক্ষিত প্রশিক্ষণ সেটের প্রতিটি আইটেম ট্যাগ করা হবে। যেমন উদাহরণস্বরূপ ("বিভাগ 1", "পাঠ্য অনুচ্ছেদ") শত শত বিভাগ থাকবে …

10 neural-network text-mining multiclass-classification word-embeddings

3

অনুরূপ নথির সন্ধানের জন্য ভেক্টর স্পেস মডেল কোসাইন tf-idf f

মিলিয়নেরও বেশি নথির কর্পাস রয়েছে প্রদত্ত নথির জন্য ভেক্টর স্পেস মডেলের মতো কোসাইন ব্যবহার করে অনুরূপ নথির সন্ধান করতে চান ঘ1। D2/ ( | | ডি।)1| | | | ঘ2| | )ঘ1⋅ঘ2/(||ঘ1||||ঘ2||)d_1 \cdot d_2 / ( ||d_1|| ||d_2|| ) এই টিএফ-আইডিএফ-এর মতো দীর্ঘতর নথির প্রতি পক্ষপাতিত্ব রোধ করতে, সমস্ত টিএফকে …

10 text-mining similarity

1

তত্ত্বাবধানে শেখার অ্যালগরিদমের একাধিক লেবেল

আমার সাথে সম্পর্কিত বিষয়গুলির সাথে একটি পাঠ্য সংকলন রয়েছে। উদাহরণস্বরূপ "A rapper Tupac was shot in LA"এবং এটি হিসাবে লেবেলযুক্ত ছিল ["celebrity", "murder"]। সুতরাং মূলত প্রতিটি বৈশিষ্ট্যের ভেক্টরের অনেকগুলি লেবেল থাকতে পারে (একই পরিমাণ নয় The প্রথম বৈশিষ্ট্য ভেক্টরটিতে 3 টি লেবেল থাকতে পারে, দ্বিতীয় 1, তৃতীয় 5)। আমি যদি …

10 machine-learning text-mining

3

লগ ফাইল বিশ্লেষণ: মান অংশ থেকে তথ্য অংশ বের করা

আমি আমাদের পণ্যগুলির একটিতে বেশ কয়েকটি লগ ফাইলে একটি ডেটা সেট তৈরি করার চেষ্টা করছি। বিভিন্ন লগ ফাইলগুলির নিজস্ব বিন্যাস এবং নিজস্ব সামগ্রী রয়েছে; আমি তাদের সফলভাবে একসাথে গ্রুপ করেছি, কেবলমাত্র এক ধাপ বাকি ... আসলে, লগ "বার্তা" সেরা তথ্য। আমার কাছে এই সমস্ত বার্তাগুলির বিস্তৃত তালিকা নেই এবং সেগুলির …

10 text-mining clustering

প্রশ্ন ট্যাগ «text-mining»