প্রশ্ন ট্যাগ «apache-kafka»

আমাকে কাফকার পরিবর্তে র‌্যাবিট এমকিউ মূল্যায়ন করতে বলা হয়েছে তবে কাফকার চেয়ে আরও ভাল কিছু করছে যে এমন কোনও কারণ খুঁজে পাওয়া খুব কঠিন হয়ে গেছে। থ্রুপুট, স্থায়িত্ব, বিলম্বিতা, বা সহজে ব্যবহারের ক্ষেত্রে এটি কি আরও ভাল কিনা জানেন?

331 rabbitmq  apache-kafka  message-queue 

যদিও আমি জুড়ে করেছি কাফকা আগে, আমি শুধু সম্প্রতি উপলব্ধি কাফকা সম্ভবত হিসাবে (ভিত্তিতে) একটি ব্যবহার করা যেতে পারে CQRS , eventstore । কাফকা অন্যতম প্রধান পয়েন্ট: ইভেন্ট ক্যাপচারিং / স্টোরিং, অবশ্যই সমস্ত এইচএ। পাব / উপ স্থাপত্য ইভেন্টলগ পুনরায় প্লে করার ক্ষমতা যা নতুন গ্রাহকদের পক্ষে সত্যের পরে সিস্টেমের …

219 cqrs  event-sourcing  apache-kafka  dddd 

আমি এন্টারপ্রাইজ সমাধানের উদ্দেশ্যে কাফকা শিখতে শুরু করি। আমার পড়ার সময়, আমার মনে কিছু প্রশ্ন এসেছিল: যখন কোনও প্রযোজক কোনও বার্তা তৈরি করে থাকেন - এটি মেসেজটি প্রেরণ করতে চায় সেই বিষয়টি নির্দিষ্ট করে দেবে, এটা কি ঠিক? এটি কি পার্টিশন সম্পর্কে যত্নশীল? যখন কোনও গ্রাহক চলমান - এটির গ্রুপ …

185 apache-kafka  kafka-consumer-api  kafka-producer-api 

কাফকার মধ্যে বিষয় মুছে ফেলার কোনও উপায় আছে কি? আমি আমার লোকাল মেশিনে কাফকা বার্তা প্রসঙ্গে একটি বার্তা চাপলাম, এখন আমি একটি ত্রুটি পাচ্ছি: kafka.common.InvalidMessageSizeException: invalid message size এখানে বৃদ্ধি করা fetch.sizeআদর্শ নয়, কারণ আমি আসলে বড় বার্তা গ্রহণ করতে চাই না।

184 apache-kafka  purge 

আমি কাফকা ব্যবহার করার চেষ্টা করছি। সমস্ত কনফিগারেশন সঠিকভাবে সম্পন্ন হয়েছে কিন্তু যখন আমি কনসোল থেকে বার্তা তৈরি করার চেষ্টা করি তখন আমি নিম্নলিখিত ত্রুটিটি পেতে থাকি WARN Error while fetching metadata with correlation id 39 : {4-3-16-topic1=LEADER_NOT_AVAILABLE} (org.apache.kafka.clients.NetworkClient) কাফকার সংস্করণ: 2.11-0.9.0.0

172 apache-kafka  producer 

আমি কাফকার তুলনায় তুলনামূলকভাবে নতুন। আমি এটি নিয়ে কিছুটা পরীক্ষা-নিরীক্ষা করেছি, তবে গ্রাহক অফসেট সম্পর্কে আমার কাছে কিছু জিনিস অস্পষ্ট। আমি এতক্ষণ যা বুঝতে পেরেছি, যখন থেকে কোনও গ্রাহক শুরু করেন, এটি অফসেটটি পড়া শুরু করবে তা কনফিগারেশন সেটিংস দ্বারা নির্ধারিত হয় auto.offset.reset(আমি ভুল হলে আমাকে সংশোধন করি)। এখন উদাহরণস্বরূপ …

169 java  distributed-computing  apache-kafka 

নতুন পরিষেবা (যেমন কোনও আরডিবিএমএস ডেটা স্টোর বা কোনও বার্তার সারি) ব্যবহার করার সময় আমি প্রথমে যা চিন্তা করি তা হ'ল: "কীভাবে আমার ডেটা গঠন করা উচিত?"। আমি কিছু প্রাথমিক উপকরণ পড়েছি এবং দেখেছি। বিশেষত, উদাহরণস্বরূপ, কাফকা: লগ প্রসেসিংয়ের জন্য বিতরণকারী মেসেজিং সিস্টেমটি নিন , যা লিখেছেন: "একটি বিষয় হ'ল …

168 apache-kafka 

কাফকাতে, আমি কেবলমাত্র একটি একক ব্রোকার, একক বিষয় এবং একক পার্টিশন ব্যবহার করতে চাই যার এক জন প্রযোজক এবং একাধিক গ্রাহক (প্রতিটি গ্রাহক ব্রোকারের কাছ থেকে ডেটার নিজস্ব অনুলিপি পেয়েছেন)। এটি দেওয়া, আমি চিড়িয়াখানার ব্যবহারের ওভারহেড চাই না; আমি কি শুধু ব্রোকার ব্যবহার করতে পারি না? চিড়িয়াখানা কীভাবে করা উচিত?

134 partitioning  apache-zookeeper  producer-consumer  apache-kafka  broker 

আমি জাভা প্রযোজক এপিআই দিয়ে কাফকা ভি। 0.8 এ স্ট্রিং-বার্তা প্রেরণ করি। যদি বার্তার আকার প্রায় 15 এমবি হয় তবে আমি একটি পাই MessageSizeTooLargeException। আমি message.max.bytes40 এমবি সেট করার চেষ্টা করেছি , তবে আমি এখনও এর ব্যতিক্রম পাই। ছোট বার্তা সমস্যা ছাড়াই কাজ করেছে। (ব্যতিক্রমটি প্রযোজকের কাছে উপস্থিত রয়েছে, আমার …

118 java  apache-kafka 

লিনাক্সে কাফকা সংস্করণটি কীভাবে খুঁজে পাবেন? ইনস্টল করা কাফকা সংস্করণটি ডাউনলোড করার সময় সংস্করণটির উল্লেখ বাদে অন্য কোনও উপায় খুঁজে পাবে কিনা?

107 apache-kafka 

অ্যাপাচি কাফকা: বিতরণ মেসেজিং সিস্টেম অ্যাপাচি ঝড়: রিয়েল টাইম মেসেজ প্রসেসিং ইভেন্ট ডেটা প্রসেসিংয়ের জন্য আমরা কীভাবে উভয় প্রযুক্তিকে রিয়েল-টাইম ডেটা পাইপলাইনে ব্যবহার করতে পারি? রিয়েল টাইম ডেটা পাইপলাইনের ক্ষেত্রে উভয়ই আমার কাছে কাজটি অভিন্ন বলে মনে হয়। আমরা কীভাবে ডেটা পাইপলাইনে উভয় প্রযুক্তি ব্যবহার করতে পারি?

102 apache-storm  apache-kafka  data-integration 

KeyedMessage<String, byte[]> keyedMessage = new KeyedMessage<String, byte[]>(request.getRequestTopicName(), SerializationUtils.serialize(message)); producer.send(keyedMessage); বর্তমানে, কীড বার্তাগুলির অংশ হিসাবে আমি কোনও কী ছাড়াই বার্তা পাঠাচ্ছি, এটি কি এখনও কাজ করবে delete.retention.ms? বার্তার অংশ হিসাবে আমার কী কী পাঠাতে হবে? এই বার্তার অংশ হিসাবে কী তৈরি করা ভাল?

102 apache-kafka  kafka-consumer-api  kafka-producer-api 

আমার testঅ্যাপাচি কাফকার 0.8.1.1 এ বিষয়টি মুছতে হবে । এখানে ডকুমেন্টেশনে প্রকাশিত হিসাবে , আমি কার্যকর করেছি: bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic test তবে, নিম্নলিখিত বার্তায় এর ফলাফল: Command must include exactly one action: --list, --describe, --create or --alter আমি কীভাবে এই বিষয়টিকে মুছতে পারি?

98 apache-kafka 

আমি সম্প্রতি কাফকা শিখতে শুরু করেছি এবং এই প্রশ্নগুলি শেষ করছি। গ্রাহক এবং স্ট্রিমের মধ্যে পার্থক্য কী? আমার জন্য, যদি কোনও সরঞ্জাম / অ্যাপ্লিকেশন কাফকার বার্তাগুলি গ্রাহ্য করে তবে কাফকা বিশ্বের একজন গ্রাহক। স্ট্রিম কীভাবে আলাদা হয় কারণ এটি কাফকার কাছ থেকে বার্তা গ্রহণ করে বা উত্পাদন করে? এবং কেন …

98 apache-kafka  kafka-consumer-api  apache-kafka-streams 

বন্ধ । এই প্রশ্নটি আরও ফোকাস করা প্রয়োজন । এটি বর্তমানে উত্তর গ্রহণ করছে না। এই প্রশ্নটি উন্নত করতে চান? প্রশ্নটি আপডেট করুন যাতে এটি কেবলমাত্র এই পোস্টটি সম্পাদনা করে একটি সমস্যায় ফোকাস করে । 10 মাস আগে বন্ধ ছিল । এই প্রশ্নটি উন্নত করুন সকল উদাহরণ কয়েক কাফকা | …

97 apache-kafka  message-queue  messaging  key-value  messagebroker