আমার কাছে ডিরেক্টরি এবং উপ-ডিরেক্টরিগুলির একটি তালিকা রয়েছে যাতে বড় সিএসভি ফাইল থাকে। এই ফাইলগুলিতে প্রায় 500 মিলিয়ন লাইন রয়েছে, প্রতিটি রেকর্ড। আমি জানতে চাই
সবচেয়ে বড় কথা, আমার এটি 'মানব পাঠযোগ্য বিন্যাসে' উদাহরণস্বরূপ দরকার। 12345678 এর চেয়ে 12,345,678
এটি কীভাবে 3 উপায়ে করা যায় তা শিখলে ভাল লাগবে। সাদামাটা ভ্যানিলা বাশ সরঞ্জাম, অ্যাডক ইত্যাদি, এবং পার্ল (বা পাইথন)।
উত্তর:
প্রতিটি ফাইলে কত লাইন থাকে।
wcমূলত শব্দ গণনার জন্য ব্যবহার করুন , আমি বিশ্বাস করি, তবে এটি লাইন, শব্দ, অক্ষর, বাইট এবং দীর্ঘতম রেখার দৈর্ঘ্য করতে পারে। -lবিকল্প বলা হয়েছে যে সব লাইন গণনা।
wc -l <filename>এটি এতে রেখার সংখ্যা আউটপুট দেবে:
$ wc -l /dir/file.txt
32724 /dir/file.txtআপনি wcপাশাপাশি ডেটা পাইপ করতে পারেন :
$ cat /dir/file.txt | wc -l
32724
$ curl google.com --silent | wc -l
63ডিরেক্টরিতে কত লাইন রয়েছে।
চেষ্টা করুন:
find . -name '*.pl' | xargs wc -lঅন্য একটি লাইনার:
( find ./ -name '*.pl' -print0 | xargs -0 cat ) | wc -lবিটিডাব্লু, wcকমান্ড লাইনের পরিবর্তে নতুন লাইন কোড গণনা করে। যখন ফাইলের শেষ লাইনটি নতুন লাইন কোডের সাথে শেষ হয় না, এটি গণনা করা হবে না।
আপনি গ্রেপ-সি ^ ব্যবহার করতে পারেন, পুরো উদাহরণ:
#this example prints line count for all found files
total=0
find /path -type f -name "*.php" | while read FILE; do
#you see use grep instead wc ! for properly counting
count=$(grep -c ^ < "$FILE")
echo "$FILE has $count lines"
let total=total+count #in bash, you can convert this for another shell
done
echo TOTAL LINES COUNTED: $totalমোট কত লাইন
নিশ্চিত না যে আমি আপনার অনুরোধটি সঠিকভাবে বুঝতে পেরেছি। উদাহরণস্বরূপ এটি প্রতিটি ফাইলের জন্য রেখার সংখ্যা দেখিয়ে নিম্নলিখিত বিন্যাসে ফলাফল দেয়:
# wc -l `find /path/to/directory/ -type f`
103 /dir/a.php
378 /dir/b/c.xml
132 /dir/d/e.xml
613 totalবিকল্পভাবে, নিম্নলিখিত কমান্ড থেকে ফাইল গণনা করে ফাইল ব্যতীত নতুন লাইন অক্ষরের মোট সংখ্যা নির্ধারণ কার্যকর হতে পারে:
# find /path/to/directory/ -type f -exec wc -l {} \; | awk '{total += $1} END{print total}'
613সবচেয়ে বড় কথা, আমার এটি 'মানব পাঠযোগ্য বিন্যাসে' উদাহরণস্বরূপ দরকার। 12345678 এর চেয়ে 12,345,678
বাশের একটি প্রিন্টফ ফাংশন অন্তর্নির্মিত রয়েছে:
printf "%0.2f\n" $Tসর্বদা হিসাবে, এখানে অনেকগুলি ভিন্ন পদ্ধতি রয়েছে যা এখানে উল্লিখিত একই ফলাফল অর্জনের জন্য ব্যবহার করা যেতে পারে।
printfথেকে তার আর্গুমেন্ট পড়া নেই stdin, বরং কম্যান্ড লাইন থেকে (থেকে বংশীধ্বনিতুল্য তুলনা echoবনাম করার বংশীধ্বনিতুল্য cat; catথেকে সার্চ stdin, echoনা)। পরিবর্তে, printf "$(find ... | xargs ...)"আর্গুমেন্ট হিসাবে আউটপুট সরবরাহ করতে ব্যবহার করুন printf।
অনেক ক্ষেত্রে wcকমান্ড এবং ওয়াইল্ডকার্ডের সংমিশ্রণই *যথেষ্ট হতে পারে।
আপনার সমস্ত ফাইল যদি একক ডিরেক্টরিতে থাকে আপনি কল করতে পারেন:
wc -l src/*আপনি বেশ কয়েকটি ফাইল এবং ডিরেক্টরি তালিকাভুক্ত করতে পারেন:
wc -l file.txt readme src/* include/*এই কমান্ডটি ফাইলগুলির তালিকা এবং তাদের লাইনগুলির সংখ্যা প্রদর্শন করবে।
সর্বশেষ লাইনটি সমস্ত ফাইলের লাইনগুলির যোগফল হবে।
একটি ডিরেক্টরিতে পুনরাবৃত্তভাবে সমস্ত ফাইল গণনা করতে:
প্রথমত, shopt -s globstarআপনার .bash_ প্রোফাইলে যুক্ত করে গ্লোবস্টার সক্ষম করুন। গ্লোবস্টারের জন্য সহায়তার জন্য বাশ ≥ 4.x প্রয়োজন যা brew install bashপ্রয়োজনে ইনস্টল করা যেতে পারে । আপনি আপনার সংস্করণ দিয়ে পরীক্ষা করতে পারেন bash --version।
তারপরে চালান:
wc -l **/*মনে রাখবেন যে গ্লোবস্টার সক্ষম না করা থাকলে এই আউটপুটটি ভুল হবে।
wc -l **/*
wc: parent_dir/child_dir: read: Is a directory"
আমি নিম্নলিখিতগুলির জন্য @ ম্যালি উত্তরটি বাড়িয়ে দেব (একটি মন্তব্যের জন্য বড়):
মোট কত লাইন
অনেক উত্তর wcকমান্ড লাইন ফাইল বিকল্প ব্যবহার করে xargs। Xargs এর সাথে সমস্যাটি বরং একটি ছোট প্ল্যাটফর্ম নির্ভর আকারের মধ্যে সীমাবদ্ধ।
তদুপরি বিএসডি (ম্যাকোস) এবং জিএনইউ (লিনাক্স / হোমব্রিউ) মধ্যে পার্থক্য রয়েছে wc।
GNU এক আদর্শ কারণ এটি আর্গুমেন্টের পরিবর্তে ( --files0) ফাইল থেকে ফাইল তালিকা পড়তে পারে ।
আপনি যদি ম্যাক হয়ে থাকেন এবং হোমব্রব করেন তবে আপনার নিম্নলিখিতটি করা উচিত:
find . -name "*.pl" -print0 | gwc -l --files0=-Wc এর পরিবর্তে gwc লক্ষ্য করুন ।