क्या gzip का उपयोग करके बहुत बड़ी फ़ाइल (~ 30 GB) को संपीड़ित करना संभव है? यदि हां, तो मुझे क्या उपयोग करना चाहिए?
या क्या कोई अन्य प्रोग्राम (अधिमानतः उबंटू वितरण पर उपलब्ध एक) है जिसे मैं बहुत बड़ी फ़ाइलों को संपीड़ित / ज़िप करने के लिए उपयोग कर सकता हूं? क्या आपको इसके साथ कोई अनुभव है?
जवाबों:
AFAIK के लिए आकार की कोई सीमा नहीं है gzip- कम से कम 30GB नहीं। बेशक, आपको अपने डिस्क पर ज़िपित फ़ाइल के लिए स्थान की आवश्यकता है, दोनों संस्करण एक साथ संपीड़ित करते समय साथ में होंगे।
bzip2 फ़ाइलों को संपीड़ित करता है (न केवल बड़े लोग :-) बेहतर है, लेकिन यह (कभी-कभी बहुत धीमी) है।
pbzipभी है - जो एक से अधिक सीपीयू-कोर का उपयोग करेगा। लेकिन अभी भी की तुलना में धीमी तरह से gzip।
pbzip2
यदि आपको एक अच्छी खाद दर की आवश्यकता है, तो आप लज़मा आज़मा सकते हैं। यह bzip2 की तुलना में अधिक तेज़ और अधिक कुशल है और gzip से भी तेज़ हो सकता है (मुझे नहीं पता कि यह सुनिश्चित है)
http://www.thegeekstuff.com/2010/06/lzma-better-compression-than-bzip2-on-unix-linux/
lzmaxzअब के पक्ष में पदावनत हो गया है । समान एल्गोरिथ्म, कुछ अलग (बेहतर?) फ़ाइल स्वरूप जिसके चारों ओर लिपटा हुआ है। LZMA गज़िप की तुलना में धीमी है, लेकिन अधिकतम गति पर यह अभी भी JSON डेटा की तरह अत्यधिक अनावश्यक सामान पर काफी अच्छा संपीड़न है। ( xz -0)
Gzip प्रारूप इनपुट आकार modulo 2 ^ 32 का प्रतिनिधित्व करता है, इसलिए
--listविकल्प गलत असम्पीडित आकारों और संपीडित अनुपातों को असम्पीडित फ़ाइलों 4 GB और बड़े के लिए रिपोर्ट करता है।
तो, bzip2(v1.0.2 और ऊपर) ले या xz।
pxz -9ve - <in >out.xzऔर आप अपने पीसी पर एक चिकन सेंकना करेंगे, लेकिन परिणाम लगभग 60% गज़िप परिणाम होगा। इसके लिए आपको लगभग 7 जीबी की आवश्यकता है।