আমার testঅ্যাপাচি কাফকার 0.8.1.1 এ বিষয়টি মুছতে হবে ।
এখানে ডকুমেন্টেশনে প্রকাশিত হিসাবে , আমি কার্যকর করেছি:
bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic test
তবে, নিম্নলিখিত বার্তায় এর ফলাফল:
Command must include exactly one action: --list, --describe, --create or --alter
আমি কীভাবে এই বিষয়টিকে মুছতে পারি?
উত্তর:
বিষয় মোছা সর্বদা 0.8.1.1 এ কাজ করে না
মুছে ফেলা পরবর্তী প্রকাশে কাজ করা উচিত, 0.8.2
kafka-topics.sh --delete --zookeeper localhost:2181 --topic your_topic_name
Topic your_topic_name is marked for deletion.
Note: This will have no impact if delete.topic.enable is not set to true.
দেখে মনে হচ্ছে মুছে ফেলা কমান্ডটি কোনও কাফাকা ( https://issues.apache.org/jira/browse/KAFKA-1397 ) কারণে কাফকার 0.8.1.x তে সরকারীভাবে নথিভুক্ত হয়নি ।
তবুও, কমান্ডটি এখনও কোডে পাঠানো হয়েছিল এবং এটি কার্যকর করা যেতে পারে:
bin/kafka-run-class.sh kafka.admin.DeleteTopicCommand --zookeeper localhost:2181 --topic test
এরই মধ্যে, বাগটি ঠিক হয়ে গেছে এবং মুছে ফেলা কমান্ডটি এখন অফিসিয়ালভাবে কাফকার ০.৮.২.০ থেকে উপলব্ধ:
bin/kafka-topics.sh --delete --zookeeper localhost:2181 --topic test
Below af kafka_home} /config/server.properties এ লাইনের নীচে যুক্ত করুন
delete.topic.enable=true
নতুন কনফিগারেশনের সাহায্যে কাফকা সার্ভারটি পুনরায় চালু করুন:
${kafka_home}/bin/kafka-server-start.sh ~/kafka/config/server.properties
আপনি যে বিষয়গুলি চান তা মুছুন:
${kafka_home}/bin/kafka-topics.sh --delete --zookeeper localhost:2181 --topic daemon12
আন্ড্রেয়া ঠিক আছে। আমরা কমান্ড লাইন ব্যবহার করে এটি করতে পারি।
এবং আমরা এখনও এটি দ্বারা প্রোগ্রাম করতে পারেন
ZkClient zkClient = new ZkClient("localhost:2181", 10000);
zkClient.deleteRecursive(ZkUtils.getTopicPath("test2"));
আসলে আমি আপনাকে কাফকার 0.8.1.1 এ বিষয় মুছে ফেলার প্রস্তাব দিচ্ছি না। আমি এই পদ্ধতিটি দ্বারা এই বিষয়টিকে মুছতে পারি, তবে আপনি চিড়িয়াখানার জন্য লগ চেক করে থাকলে, মুছে ফেলা এলোমেলো করে দেয়।
আপনি testচিড়িয়াখানার শেল কমান্ড ( zookeeper-shell.sh) থেকে একটি নির্দিষ্ট কাফকা বিষয় (উদাহরণ :) মুছতে পারেন । বিষয় মুছে ফেলার জন্য নীচের কমান্ডটি ব্যবহার করুন
rmr {path of the topic}
উদাহরণ:
rmr /brokers/topics/test
কাফকার ১ বা একাধিক বিষয় মুছে ফেলার পদক্ষেপ
1. Go to {kafka_home}/config/server.properties
2. Uncomment delete.topic.enable=true
kafka-topics.sh --delete --zookeeper লোকহোস্ট: 2181 - টপিক
(পরীক্ষার উদ্দেশ্যে ভাল, যেখানে আমি একাধিক বিষয় তৈরি করেছি এবং বিভিন্ন পরিস্থিতিতে সেগুলি মুছতে হয়েছিল)
বিন / কাফকা- টপিক্স.শ - তালিকা --জুকিপার লোকালহোস্ট: 2181
যদি কোনও বিষয় তালিকাভুক্ত না করা হয় তবে সমস্ত বিষয় সফলভাবে মুছে ফেলা হয়েছে I যদি বিষয়গুলি তালিকাভুক্ত করা হয়, তবে মোছা সফল হয়নি। উপরের পদক্ষেপগুলি আবার চেষ্টা করুন বা আপনার কম্পিউটার পুনরায় চালু করুন।
server.propertiesফাইলটিতে উপস্থিত হবে না । আপনাকে সেই লাইনটি ম্যানুয়ালি যুক্ত করতে হবে।
এই পদক্ষেপগুলি সমস্ত বিষয় এবং ডেটা মুছে ফেলবে
আদেশ:
bin/kafka-topics.sh --delete --zookeeper localhost:2181 --topic test
দুর্ভাগ্যক্রমে কেবল মোছার জন্য বিষয় চিহ্নিত করে।
মুছে ফেলা হয় না।
যে কোনও স্ক্রিপ্ট পরীক্ষা করার সময় এটি ঝামেলা তৈরি করে, যা কাফকা কনফিগারেশন প্রস্তুত করে।
সংযুক্ত থ্রেড:
উপরের উত্তরে যুক্ত করার সাথে একজনকে চিড়িয়াখানার গ্রাহক অফসেট পথে সেই বিষয়ের সাথে যুক্ত মেটা ডেটা মুছতে হবে।
bin/zookeeper-shell.sh zookeeperhost:port
rmr /consumers/<sample-consumer-1>/offsets/<deleted-topic>
অন্যথায় চিড়িয়াখানার উপর নির্ভর করে কাফকা-পর্যবেক্ষণ সরঞ্জামগুলিতে লেগ নেতিবাচক হবে।
এখানে ডক হিসাবে উল্লিখিত
বিষয় মুছে ফেলার বিকল্পটি ডিফল্টরূপে অক্ষম করা হয়। এটি সক্ষম করতে সার্ভার কনফিগারেশন সেট করতে সক্ষম করুন মুছুন.টিক.এনবেবল = সত্য কাফকা বর্তমানে কোনও বিষয়ের পার্টিশনের সংখ্যা হ্রাস করতে বা প্রতিরূপ ফ্যাক্টরটি পরিবর্তন সমর্থন করে না।
নিশ্চিত করুন মুছে ফেলুন.টিক.অনেবল = সত্য
bin/kafka-topics.sh –delete –zookeeper localhost:2181 –topic <topic-name>
আপনার যদি বিষয়গুলি মুছে ফেলার সমস্যা হয়, তবে বিষয়টি মুছে ফেলার চেষ্টা করুন:
$KAFKA_HOME/bin/kafka-topics.sh --delete --zookeeper localhost:2181 --topic your_topic_name
আদেশ তারপরে মুছে ফেলার প্রক্রিয়াটি যাচাই করতে, কাফকা লগ ডিরেক্টরিতে যান যা সাধারণত নীচে রাখা হয় /tmp/kafka-logs/, তারপরে কমান্ডের your_topic_nameমাধ্যমে ফাইলটি মুছুন rm -rf your_topic_name।
মত একটি কাফকা ম্যানেজমেন্ট টুল মাধ্যমে পুরো প্রক্রিয়া পর্যবেক্ষণ করতে মনে রাখুন Kafka Tool।
উপরে উল্লিখিত প্রক্রিয়াটি কাফকা সার্ভার পুনরায় আরম্ভ না করে বিষয়গুলি সরিয়ে ফেলবে।
পদক্ষেপ 1: নিশ্চিত করুন যে আপনি চিড়িয়াখানা এবং কাফকার সাথে সংযুক্ত রয়েছেন
পদক্ষেপ 2: কাফকা টপিকটি মুছে ফেলতে কাফকা-টপিক (ম্যাক) বা কাফকা-টপিক.শ চালান যদি ব্যবহার করা হয় (লিনাক্স / ম্যাক) আপনার বিষয়ের নামের সাথে পোর্ট এবং - টপিক যুক্ত করুন এবং - এটি মুছে ফেলুন কেবল বিষয়টির সাথে মুছে ফেলুন সাফল্য
# Delete the kafka topic
# it will delete the kafka topic
kafka-topics --zookeeper 127.0.0.1:2181 --topic name_of_topic --delete
# or
kafka-topics.sh --zookeeper 127.0.0.1:2181 --topic name_of_topic --delete