split पर टैग किए गए जवाब

संबंधित, लेकिन कोई संतोषजनक जवाब नहीं: मैं एक बड़ी पाठ फ़ाइल को 500 शब्दों या उसके अंशों में कैसे विभाजित कर सकता हूं? मैं एक टेक्स्ट फ़ाइल ( http://mattmahoney.net/dc/text8.zip ) को> 10 ^ 7 शब्दों के साथ एक पंक्ति में लेने की कोशिश कर रहा हूं , और इसे प्रत्येक …

11 text-processing  sed  awk  split 

मेरे पास एक डाइरेक्टरी ट्री है जिसे मैं ऑप्टिकल डिस्क में बैकअप लेना चाहता हूं। दुर्भाग्य से, यह किसी एक डिस्क के आकार से अधिक है (यह लगभग 60GB है)। मैं एक ऐसी स्क्रिप्ट की तलाश कर रहा हूं, जो इस पेड़ को कड़ी कड़ी या व्हाट्सएप (मूल अछूता छोड़कर) …

11 backup  disk-usage  split  burning 

मेरे पास तीन प्रकार के डेटा हैं जो विभिन्न स्वरूपों में हैं; प्रत्येक डेटा प्रकार के लिए, एक पायथन स्क्रिप्ट है जो इसे एकल एकीकृत प्रारूप में बदल देती है। यह पायथन लिपि धीमी और सीपीयू-बाउंड (मल्टी-कोर मशीन पर सिंगल कोर के लिए) है, इसलिए मैं इसके तीन उदाहरणों को …

10 text-processing  pipe  split  parallelism 

मेरे पास एक बड़ी (~ 60G) संपीड़ित फ़ाइल ( tar.gz) थी। मैं splitइसे 4 भागों में तोड़ता था और फिर catउन्हें वापस एक साथ जोड़ने के लिए। हालांकि, अब, जब मैं असम्पीडित फ़ाइल के आकार का अनुमान लगाने की कोशिश कर रहा हूं, तो यह पता चला है कि यह …

9 compression  gzip  split 

मेरे पास एक बड़ी टेक्स्ट फ़ाइल है (~ 50Gb जब gz'ed)। फ़ाइल में 4*Nलाइनें या Nरिकॉर्ड हैं; हर रिकॉर्ड में 4 लाइनें होती हैं। मैं इस फाइल को ४ छोटी फाइलों में विभाजित करना चाहता हूं, जो प्रत्येक इनपुट फ़ाइल के लगभग २५% आकार की हैं। मैं फ़ाइल को रिकॉर्ड …

9 text-processing  sed  awk  split  wc 

मैं एक postgresql डेटाबेस के लिए एक बहुत बड़ी फ़ाइल लोड कर रहा हूँ। इस मैं पहली बार उपयोग करने के लिए splitफ़ाइल में छोटे फ़ाइलें (30GB प्रत्येक) प्राप्त करने के लिए और फिर मैं का उपयोग कर डेटाबेस के लिए प्रत्येक छोटे फ़ाइल लोड GNU Parallelऔर psql copy। समस्या …

9 files  split  gnu-parallel