প্রশ্ন ট্যাগ «gnu-parallel»

আমি নীচের লিপিটি সমান্তরাল করার চেষ্টা করে যাচ্ছি, বিশেষত তিনটি লুপের জন্য প্রতিটি জন্য জিএনইউ সমান্তরাল ব্যবহার করে কিন্তু সক্ষম হয়ে উঠতে পারি নি। ফর লুপের মধ্যে থাকা 4 টি কমান্ড সিরিজটিতে চালিত হয়, প্রতিটি লুপ প্রায় 10 মিনিট সময় নেয়। #!/bin/bash kar='KAR5' runList='run2 run3 run4' mkdir normFunc for run …

109 shell-script  gnu-parallel 

আমি কোনও .shস্ক্রিপ্টে কাজে কোনও সেট সেট চালানোর পার্থক্য বা সুবিধা (যদি থাকে তবে) সম্পর্কে বিভ্রান্ত হয়ে পড়েছিGNU parallel উদাহরণস্বরূপ ওলে টেঙ্গের উত্তর: parallel ./pngout -s0 {} R{} ::: *.png এগুলি ব্যাকগ্রাউন্ডে রাখার মধ্য দিয়ে লুপিং বলার চেয়ে &। উদাহরণস্বরূপ frostschutz এর উত্তর: #copied from the link for illustration for …

39 shell-script  background-process  xargs  gnu-parallel 

আমি rsyncঅন্য হোস্টের ডেটার সাথে এক হোস্টে ডেটা সিঙ্ক্রোনাইজ করতে স্ক্রিপ্ট ব্যবহার করে যাচ্ছি । ডেটাতে অসংখ্য ছোট আকারের ফাইল রয়েছে যা প্রায় 1.2 টিবিতে অবদান রাখে। এই ফাইলগুলি সিঙ্ক করার জন্য, আমি rsyncনিম্নলিখিত হিসাবে কমান্ডটি ব্যবহার করছি: rsync -avzm --stats --human-readable --include-from proj.lst /data/projects REMOTEHOST:/data/ Proj.lst এর বিষয়বস্তু নীচে …

18 linux  rhel  rsync  gnu-parallel 

আমার শেল স্ক্রিপ্টিং সমস্যা রয়েছে যেখানে আমাকে ইনপুট ফাইলগুলি (প্রতিটি ইনপুট লাইনযুক্ত প্রতিটি ফাইল) পূর্ণ একটি ডিরেক্টরি দেওয়া হয়েছে এবং তাদের প্রতিটি আউটপুট একটি অনন্য ফাইলে পুনর্নির্দেশ করা উচিত (ওরফে, file_1.input প্রয়োজন) ফাইল_1. আউটপুট, এবং এগুলিতে ক্যাপচার করা হবে)। পূর্ব-সমান্তরাল , আমি কেবল ডিরেক্টরিতে প্রতিটি ফাইল পুনরাবৃত্তি করব এবং আমার …

18 scripting  parallelism  gnu-parallel 

একটি বৃহত স্ক্রিপ্ট পোস্ট-প্রক্রিয়া করার জন্য কিছু সিমুলেশন ডেটা আমার নিম্নলিখিত লাইন ছিল: parallel bnzip2 -- *.bz2 কোনটি, যদি আমি parallelসঠিকভাবে বুঝতে পারি (এবং আমি নাও বুঝতে পারি) তবে তালিকাভুক্ত এক্সটেনশন সহ সমস্ত ফাইলের মধ্যে প্রোগ্রামের এন-কোর থ্রেড চালানো উচিত। আপনি লক্ষ্য করতে পারেন যে আমি আদেশটি ভুল বানান করেছি …

15 gnu-parallel  moreutils-parallel 

সুতরাং আমি একটি সময় লুপ আছে: cat live_hosts | while read host; do \ sortstuff.sh -a "$host" > sortedstuff-"$host"; done তবে এটি দীর্ঘ সময় নিতে পারে। লুপ চলাকালীন আমি এর জন্য কীভাবে জিএনইউ সমান্তরাল ব্যবহার করব?

12 shell-script  files  gnu-parallel 

% echo -e '1\n2' | parallel "bash -c 'echo :\$1' '' {}" :1 :2 % echo -e '1\n2' | parallel bash -c 'echo :\$1' '' {} % আমি দ্বিতীয় লাইনের একই কাজ করবে আশা করি।

9 bash  shell  quoting  gnu-parallel 

আমি একটি পোস্টগ্র্যাসকিএল ডেটাবেজে একটি দুর্দান্ত দৈত্য ফাইল লোড করছি। এটি করার জন্য আমি প্রথমে splitফাইলটিতে ছোট ফাইল (প্রতিটি 30 জিবি) পাওয়ার জন্য ব্যবহার করি এবং তারপরে এবং প্রতিটি ব্যবহার করে ছোট ছোট ফাইলটি ডাটাবেসে লোড করি GNU Parallelএবং psql copy। সমস্যাটি হ'ল এটি ফাইলটি বিভক্ত করতে প্রায় 7 ঘন্টা …

9 files  split  gnu-parallel