लिनक्स पर मापने के लिए कैसे समाप्त होने के बाद किसी एप्लिकेशन की पीक मेमोरी

मैं लिनक्स पर चल रहे एप्लिकेशन की चरम मेमोरी को कैसे माप सकता हूं?

मैं इस ऐप को बैच में चलाता हूं इसलिए मैं RSS का उपयोग नहीं कर सकता, यह वर्तमान मेमोरी की रिपोर्ट करता है। मुझे उस चरम मेमोरी की आवश्यकता है जिसे एप्लिकेशन ने अंत में रिपोर्ट किया है।

VmPeak या तो एक समाधान नहीं है, क्योंकि यह आवंटित मेमोरी की रिपोर्ट करता है और वास्तविक राम से भी गणना नहीं करता है, लेकिन हार्ड डिस्क से भी।

linux memory

— des_user
स्रोत

आप किस OS पर एप्लिकेशन चला रहे हैं?

— एक CVn

मैं लिनक्स पर काम कर रहा हूं

— des_user

यह धागा आपकी मदद के लिए होना चाहिए: serverfault.com/questions/387268/…

— जैकब कोलमैन

जवाबों:

यहां प्रक्रियाओं के चरम मेमोरी उपयोग पर नज़र रखने के लिए 2 विधियाँ हैं।

उबाल

मैंने इस टूल का उपयोग नहीं किया है, लेकिन ऐसा लगता है कि आप क्या देख रहे हैं। इसे सिरसी कहा जाता है ।

विवरण

सिरपी एक पायथन लिपि है जो नियमित रूप से एक या अधिक चलने वाली प्रक्रियाओं की मेमोरी और सीपीयू लोड का स्नैपशॉट लेती है, ताकि सिस्टम संसाधनों के उनके उपयोग की एक प्रोफ़ाइल को गतिशील रूप से बनाया जा सके।

उदाहरण

$ syrupy.py myprog

  PID DATE        TIME     ELAPSED  CPU   MEM    RSS   VSIZE
14634 2008-10-10  20:45:25   00:00  0.0   0.0   2996    6680
14634 2008-10-10  20:45:26   00:01  105   0.2   7804   12592
14634 2008-10-10  20:45:27   00:02  103   0.2   8996   13776
14634 2008-10-10  20:45:28   00:03  103   0.2  10468   15348
14634 2008-10-10  20:45:29   00:04  103   0.3  11412   16396
14634 2008-10-10  20:45:30   00:05  104   0.3  12492   17444

`/usr/bin/time -v`

हाँ, विडंबना यह है कि GNU टाइम कमांड आपको एक प्रक्रिया की चरम मेमोरी उपयोग दे सकता है। यह शिखर मेमोरी को इस तरह रिपोर्ट करता है Maximum resident set size (kbytes):।

उदाहरण

$ /usr/bin/time -v ~/projects/prime_numbers/eratosthenes_prime_sieve.pl 10 1000000
...

    Command being timed: "/home/saml/projects/prime_numbers/eratosthenes_prime_sieve.pl 10 1000000"
    User time (seconds): 1.12
    System time (seconds): 0.05
    Percent of CPU this job got: 54%
    Elapsed (wall clock) time (h:mm:ss or m:ss): 0:02.19
    Average shared text size (kbytes): 0
    Average unshared data size (kbytes): 0
    Average stack size (kbytes): 0
    Average total size (kbytes): 0
    Maximum resident set size (kbytes): 79304
    Average resident set size (kbytes): 0
    Major (requiring I/O) page faults: 0
    Minor (reclaiming a frame) page faults: 20014
    Voluntary context switches: 83
    Involuntary context switches: 274
    Swaps: 0
    File system inputs: 0
    File system outputs: 0
    Socket messages sent: 0
    Socket messages received: 0
    Signals delivered: 0
    Page size (bytes): 4096
    Exit status: 0

संदर्भ

— slm
स्रोत

हालाँकि यह विषय काफी पुराना है, फिर भी मैं एक अन्य परियोजना साझा करना चाहता हूँ जो cgroups Linux कर्नेल फीचर से निकली है।

https://github.com/gsauthof/cgmemtime :

cgmemtime एक प्रक्रिया और इसके वंशज प्रक्रियाओं की उच्च-जल RSS + CACHE स्मृति उपयोग को मापता है।

ऐसा करने में सक्षम होने के लिए यह प्रक्रिया को अपने स्वयं के समूह में डालता है।

उदाहरण के लिए प्रक्रिया A में 10 MiB आवंटित होता है और एक B बच्चे को आवंटित करता है जो कि 20 MiB आवंटित करता है और वह एक बच्चा C जो 30 MiB आवंटित करता है। सभी तीन प्रक्रियाएँ एक समय विंडो साझा करती हैं जहाँ उनके आवंटन के परिणामस्वरूप RSS (निवासी सेट आकार) मेमोरी का उपयोग होता है।

अब सवाल यह है कि ए चलाने के परिणामस्वरूप वास्तव में कितनी मेमोरी का उपयोग किया जाता है?

उत्तर: 60 MiB

cgmemtime इस तरह के सवालों का जवाब देने के लिए उपकरण है।

उपयोग के उदाहरण होंगे:

$ sudo ./cgmemtime --setup -g <myusergroup> --perm 775

$ ./cgmemtime ./testa x 10 20 30
Parent PID is 27189
Allocating 10 MiBs
New Child: 27193
Allocating 20 MiBs
New Child: 27194
Allocating 30 MiBs
Child user:    0.000 s
Child sys :    0.005 s
Child wall:    6.006 s
Child high-water RSS                    :      11648 KiB
Recursive and acc. high-water RSS+CACHE :      61840 KiB

$ ./cgmemtime python -c 'print range(100000)[48517]'
48517
Child user:    0.014 s
Child sys :    0.014 s
Child wall:    0.029 s
Child high-water RSS                    :       9948 KiB
Recursive and acc. high-water RSS+CACHE :       5724 KiB

— व्लाद फ्रोलोव
स्रोत

इसलिए, इस उपकरण का उपयोग किसी प्रोग्राम के चरम रैम उपयोग की रिपोर्ट करने के बाद कैसे किया जा सकता है ?

— terdon

@terdon यह wait4cgroups ( memory.max_usage_in_bytes) के साथ संयोजन में प्रक्रिया से बाहर निकलने के लिए उपयोग करता है , जो समझ में आता है। अधिक जानकारी जीएएडीएमई में जीथब पर उपलब्ध है।

— व्लाद फ्रलोव

धन्यवाद, लेकिन मेरी बात आपके उत्तर के बारे में अधिक थी। जैसा कि यह खड़ा है, यह सवाल का जवाब नहीं दे रहा है, केवल कुछ बाहरी संसाधन की ओर इशारा करता है जो करने में सक्षम हो सकता है। इसके अलावा, आपने एक ही उत्तर कहीं और पोस्ट किया है जो एक स्वचालित ध्वज उठाता है। कृपया अपने उत्तर को संपादित करें और एक उदाहरण शामिल करें जिसमें दिखाया गया है कि यह कार्यक्रम कैसे ओपी के लिए पूछ रहा है।

— terdon

@terdon हाँ, मैंने किया था! क्योंकि मैंने एक ही प्रश्न के लिए खोज की है और प्रश्न बहुत अधिक समान हैं, और उत्तर सभी समान हैं: 'पार्स पीएस आउटपुट', जो पागल है! मैंने एक सप्ताह पहले गलती से cgmemtime प्रोजेक्ट में टकरा दिया था, जो उन सभी सवालों के लिए एकदम सही मेल है, जिन पर मैंने टिप्पणी की है!

— व्लाद फ्रलोव

काफी उचित। यह बहुत अच्छा होगा यदि आप इसका उदाहरण दे सकते हैं कि इसका उपयोग कैसे किया जा सकता है। यह आपके उत्तर को बेहतर बनाता है। किसी भी मामले में, इस पोस्ट करने के लिए समय निकालने के लिए धन्यवाद, मुझे यकीन है कि अन्य इसे उपयोगी पाएंगे।

— terdon