gnu-parallel पर टैग किए गए जवाब

मैं निम्नलिखित स्क्रिप्ट को समानांतर करने की कोशिश कर रहा हूं, विशेष रूप से तीन फॉर लूप उदाहरणों में से प्रत्येक, जीएनयू समानांतर का उपयोग कर रहा है, लेकिन करने में सक्षम नहीं है। फोर लूप के भीतर निहित 4 कमांड श्रृंखला में चलते हैं, प्रत्येक लूप को लगभग 10 …

109 shell-script  gnu-parallel 

मैं एक .shस्क्रिप्ट का उपयोग करके कार्यों के एक सेट को चलाने के अंतर या लाभ (यदि कोई हो) के बारे में उलझन में हूंGNU parallel जैसे ओले तांगे का जवाब: parallel ./pngout -s0 {} R{} ::: *.png कहने के बजाय उनके माध्यम से उन्हें पृष्ठभूमि में डालकर पाशन करना …

40 shell-script  background-process  xargs  gnu-parallel 

मैं rsyncएक होस्ट पर डेटा को दूसरे होस्ट पर डेटा के साथ सिंक्रनाइज़ करने के लिए स्क्रिप्ट का उपयोग कर रहा हूं । डेटा में कई छोटे आकार की फाइलें हैं जो लगभग 1.2TB में योगदान करती हैं। उन फ़ाइलों को सिंक करने के लिए, मैं rsyncनिम्नानुसार कमांड का उपयोग …

18 linux  rhel  rsync  gnu-parallel 

मुझे एक शेल स्क्रिप्टिंग समस्या है, जहां मुझे इनपुट फ़ाइलों से भरी निर्देशिका दी गई है (प्रत्येक फ़ाइल जिसमें कई इनपुट लाइनें हैं), और मुझे उन्हें व्यक्तिगत रूप से संसाधित करने की आवश्यकता है, उनके प्रत्येक आउटपुट को एक अद्वितीय फ़ाइल (उर्फ, file_1.input) की आवश्यकता है file_1.output में कैप्चर किया …

18 scripting  parallelism  gnu-parallel 

एक बड़ी स्क्रिप्ट में कुछ सिमुलेशन डेटा को पोस्ट-प्रोसेस करने के लिए मेरे पास निम्नलिखित लाइन थी: parallel bnzip2 -- *.bz2 जो, अगर मैं parallelसही ढंग से समझता हूं (और मैं नहीं कर सकता हूं), सूचीबद्ध एक्सटेंशन के साथ सभी फाइलों पर कार्यक्रम के एन-कोर थ्रेड्स चलाने चाहिए। आप देख …

15 gnu-parallel  moreutils-parallel 

इसलिए मेरे पास कुछ समय है: cat live_hosts | while read host; do \ sortstuff.sh -a "$host" > sortedstuff-"$host"; done लेकिन इसमें लंबा समय लग सकता है। मैं लूप करते समय इसके लिए जीएनयू समानांतर का उपयोग कैसे करूंगा?

12 shell-script  files  gnu-parallel 

% echo -e '1\n2' | parallel "bash -c 'echo :\$1' '' {}" :1 :2 % echo -e '1\n2' | parallel bash -c 'echo :\$1' '' {} % मुझे उम्मीद है कि दूसरी पंक्ति भी ऐसा ही करेगी।

9 bash  shell  quoting  gnu-parallel 

मैं एक postgresql डेटाबेस के लिए एक बहुत बड़ी फ़ाइल लोड कर रहा हूँ। इस मैं पहली बार उपयोग करने के लिए splitफ़ाइल में छोटे फ़ाइलें (30GB प्रत्येक) प्राप्त करने के लिए और फिर मैं का उपयोग कर डेटाबेस के लिए प्रत्येक छोटे फ़ाइल लोड GNU Parallelऔर psql copy। समस्या …

9 files  split  gnu-parallel