क्या एक फ़ाइल जो मूल रूप से विरल थी और फिर विस्तारित हो उसे फिर से विरल बनाया जा सकता है?

Question

मुझे पता है कि मूल रूप से एक स्पार्स फाइल को कॉपी या ट्रांसफर करने के लिए एक उपयोगिता का उपयोग किए बिना एक स्पार्स फाइल होती है जो स्पार्स फाइलों को समझती है, जिससे 'छेद' भर जाएगा। वहाँ एक विधि या उपयोगिता है क्या एक बार एक विरल फ़ाइल वापस विरल के लिए था?

उदाहरण के लिए:
विरल फ़ाइल बनाएँ:

% dd if=/dev/zero of=TEST bs=1 count=0 seek=1G
# do some op that pads out the holes
% scp TEST localhost:~/TEST2
% ls -lhs TEST*
   0 -rw-rw-r--. 1 tony tony 1.0G Oct 16 13:35 TEST
1.1G -rw-rw-r--. 1 tony tony 1.0G Oct 16 13:37 TEST2

क्या कोई रास्ता है:

% resparse TEST2
to get:
   0 -rw-rw-r--. 1 tony tony 1.0G Oct 16 13:35 TEST
  0G -rw-rw-r--. 1 tony tony 1.0G Oct 16 13:37 TEST2

Comments

क्षमा करें, मुझे मूल ques को बहुत सुंदर बनाना था ...

— user25849

केवल एक चीज जो मैंने देखी है, वह एक GNU 'cp' है, जैसा कि '% cp --sparse = हमेशा पूर्व-विरल-फ़ाइल नव-विरल-फ़ाइल' में अवरोध करनेवाला यह है कि यह नहीं होगा ' जगह में'।

— user25849

यदि आप एक विरल फ़ाइल को कॉपी करना चाहते हैं और कॉपी को स्पार्स होने देते हैं, तो उपयोग करें rsync -aS।

— गिल्स एसओ- बुराई पर रोक '22

Answer 1

2015 को संपादित करें

के रूप में util-linux 2.25, fallocateलिनक्स पर उपयोगिता एक है -d/ --dig-holeउस के लिए विकल्प।

fallocate -d the-file

फ़ाइल में शून्य से भरे हर ब्लॉक के लिए एक छेद खोदेंगे

---

पुराने सिस्टम पर, आप इसे हाथ से कर सकते हैं:

लिनक्स के पास ऐसा FALLOC_FL_PUNCH_HOLEकरने का विकल्प है fallocate। मुझे एक उदाहरण के साथ जीथब पर एक स्क्रिप्ट मिली:

पायथन से FALLOC_FL_PUNCH_HOLE का उपयोग करना

मैंने इसे करने के लिए थोड़ा संशोधित किया जो आपने पूछा - शून्य के साथ भरी हुई फ़ाइलों के क्षेत्रों में छिद्र छेद। यह रहा:

फ़ाइलों में छिद्र छेद से FALLOC_FL_PUNCH_HOLE का उपयोग करना

usage: punch.py [-h] [-v VERBOSE] FILE [FILE ...]

Punch out the empty areas in a file, making it sparse

positional arguments:
  FILE                  file(s) to modify in-place

optional arguments:
  -h, --help            show this help message and exit
  -v VERBOSE, --verbose VERBOSE
                        be verbose

उदाहरण:

# create a file with some data, a hole, and some more data
$ dd if=/dev/urandom of=test1 bs=4096 count=1 seek=0
$ dd if=/dev/urandom of=test1 bs=4096 count=1 seek=2

# see that it has holes
$ du --block-size=1 --apparent-size test1
12288   test1
$ du --block-size=1 test1
8192    test1

# copy it, ignoring the hole
$ cat test1 > test2
$ du --block-size=1 --apparent-size test2
12288   test2
$ du --block-size=1 test2
12288    test2

# punch holes again
$ ./punch.py test2
$ du --block-size=1 --apparent-size test2
12288   test2
$ du --block-size=1 test2
8192    test2

# verify
$ cmp test1 test2 && echo "files are the same"
files are the same

ध्यान दें कि punch.pyकेवल 4096 बाइट्स के ब्लॉक को पंच करने के लिए पाया जाता है, इसलिए हो सकता है कि यह फ़ाइल तब तक विरल न हो जैसा कि आपने शुरू किया था। यह होशियार बनाया जा सकता है, ज़ाहिर है। इसके अलावा, यह केवल हल्के ढंग से परीक्षण किया गया है , इसलिए सावधान रहें और इस पर भरोसा करने से पहले बैकअप बनाएं !

Comments

मुझे यह सबसे अच्छा लगता है क्योंकि इसके लिए पूरी फाइल को फिर से लिखने की आवश्यकता नहीं होती है।

— पीटर

Answer 2

यदि आप एक फ़ाइल विरल बनाना चाहते हैं, तो आप इसके साथ सीधे कर सकते हैं dd।

dd if=./zeropadded.iso of=./isnowsparse.iso conv=sparse

से dd(1)मैनुअल:

          sparse   If one or more output blocks would consist solely of
                   NUL bytes, try to seek the output file by the required
                   space instead of filling them with NULs, resulting in a
                   sparse file.

तो, ध्यान दें कि यह आगे की तलाश करेगा तभी पूरा ब्लॉक खाली होगा। अधिकतम विरलता उपयोग के लिए bs=1।

Comments

किसी भी ब्लॉक आकार से कम bs=512वास्तव में कोई मतलब नहीं है, क्योंकि डिस्क ब्लॉक डिवाइस हैं। ( bs=4096नए ड्राइव में)

— लैपो

इस तरह दिखता हैcp --sparse=always zeropadded.iso isnowsparse.iso

— अधिकतम

Answer 3

की कमी tarइसे आईएनजी एक साथ -Sध्वज (जीएनयू टार कल्पना करते हुए), और फिर से क्रियान्वित scp... कोई। कोई उपयोगिता मुझे पता नहीं है कि "छेद" कहां है, यह जानने का एक तरीका होगा।

Comments

GNU cp एक फाइल को फिर से तैयार करेगा: मैन पेज से: निर्दिष्ट करें - sparse = हमेशा एक विरल DEST फाइल बनाने के लिए जब भी SOURCE फाइल में शून्य बाइट्स का एक लंबा पर्याप्त अनुक्रम हो।

— user25849

बहुत बढ़िया। हर दिन कुछ सीखें - उस झंडे को कब पेश किया गया था? "जाने-माने" कार्यक्रमों के मैन-पेज को एक बार पढ़ने के लिए देता है, डी

— टिंक

Answer 4

मुझे इस बात का सौभाग्य मिला है:

cd whatever
rsync -avxWSHAXI . .

-Iबलों सभी फाइलों को अद्यतन करने के लिए, यह सोचता है कि क्या वे या बदल दिया है नहीं की परवाह किए बिना rsync; -Sनई फ़ाइलों को स्पार्सिफ़ाइड करने का कारण बनता है। -aयह पुनरावर्ती होता है, ताकि आप एक आदेश में संपूर्ण निर्देशिका पेड़ों को स्पार्सिफाई कर सकें।

यह एक बीस्पोक उपकरण के रूप में अच्छा नहीं है जो छिद्रों का शिकार करता है और उन्हें नष्ट कर देता है FALLOC_FL_PUNCH_HOLE, लेकिन यह पूरी निर्देशिका पेड़ों की नकल करने से बेहतर है।