wget पर टैग किए गए जवाब

मैं निम्नलिखित बैश स्क्रिप्ट में समानांतर में कर्ल पृष्ठभूमि प्रक्रियाओं के थाउंसैंड चला रहा हूं START=$(date +%s) for i in {1..100000} do curl -s "http://some_url_here/"$i > $i.txt& END=$(date +%s) DIFF=$(( $END - $START )) echo "It took $DIFF seconds" done मेरे पास 49Gb Corei7-920 समर्पित सर्वर (वर्चुअल नहीं) है। मैं …

14 linux  performance  bash  curl  wget 

मैंने sshअपने सर्वर को एड किया और भाग गया wget -r -np zzz.aaa/bbb/cccऔर यह काम करने लगा। तब मेरा इंटरनेट कनेक्शन (मेरे घर पर) बाधित हो गया और मैं यह सोचकर चिंतित हो गया कि यह पेड wgetहो गया है hupक्योंकि sshकनेक्शन खो गया था और इसलिए टर्मिनल की मृत्यु …

13 ssh  terminal  wget  signals 

मैं www.website.com/XYZ के तहत लिंक क्रॉल करना चाहूंगा और केवल उन लिंक को डाउनलोड करूंगा जो www.website.com/ABC के अंतर्गत हैं। मैं फ़ाइलों को प्राप्त करने के लिए निम्नलिखित wget कमांड का उपयोग कर रहा हूं: wget -I ABC -r -e robots=off --wait 0.25 http://www.website.com/XYZ यह पूरी तरह से काम करता …

13 command-line  wget 

मैं wgetछवि फ़ाइलों को डाउनलोड करने के लिए (एक php स्क्रिप्ट से) का उपयोग करना चाहता हूं , लेकिन एक निश्चित आकार से अधिक फ़ाइलों को डाउनलोड नहीं करना चाहता। क्या मैं फ़ाइल का आकार सीमित कर सकता हूं wget? यदि नहीं, तो बेहतर तरीका क्या है?

13 files  wget  size 

मैं एक स्क्रिप्ट लिख रहा हूं जिसमें किसी फ़ाइल को डाउनलोड करना और उसमें हेरफेर करना शामिल है, और मैं यह सुनिश्चित करना चाहता हूं कि उस पर काम करने से पहले फ़ाइल अधूरी न हो (जैसे एक गिरा हुआ कनेक्शन)।

13 files  wget  curl  download  corruption 

मेरे पास एक सर्वर पर एक साइट है जो मूल रूप से HTML पृष्ठों, चित्रों और ध्वनियों का एक गुच्छा है। मैंने उस सर्वर पर अपना पासवर्ड खो दिया है और मुझे वहां जमा होने वाली हर चीज को हथियाने की जरूरत है। मैं पृष्ठ दर पृष्ठ जा सकता हूं …

13 wget 

मैं wgetइस तरह से चल रहा हूं : wget --mirror --adjust-extension --convert-links --no-cookies http://tshepang.net -o log-main मुझे इन संदेशों का एक गुच्छा मिलता है: Last-modified header missing -- time-stamps turned off. मुझे लगता है कि इसका मतलब है कि पृष्ठ फिर से डाउनलोड हो रहे हैं, भले ही मेरे पास …

13 wget  web 

मैं एक स्थिर HTML पेज डाउनलोड करने के लिए wget का उपयोग कर रहा हूं। W3C मान्य मुझे बताता है कि पृष्ठ UTF-8 में एन्कोडेड है। फिर भी जब मैं डाउनलोड के बाद फ़ाइल को बिल्ली करता हूं, तो मुझे बाइनरी बकवास का एक गुच्छा मिलता है। मैं उबंटू पर …

12 wget  character-encoding  gzip  http 

मैं कई फाइलों में फैले डेटा को डाउनलोड कर रहा हूं जो एक बार प्रकाशित होने के बाद नहीं बदलते हैं। इसलिए --timestampingबहुत अच्छा नहीं है, क्योंकि यह लगातार जाँच रहा है कि जो भी संसाधन बदला गया है, जो मेरे मामले में पूरी तरह से व्यर्थ है। --no-clobberपूरी तरह …

12 wget  download 

उदाहरण के लिए मेरे पास एक लिंक है http://www.abc.com/123/def/ghi/jkl.mno। मैं इसका उपयोग करके डाउनलोड करना चाहता हूं wgetया curlआउटपुट फ़ाइल का नाम प्राप्त करना चाहता हूं def_ghi_jkl.mno, जहां def_ghiलिंक से भाग लिया जाता है। मैं इस wgetकमांड को कई फाइलों को डाउनलोड करने के लिए एक स्क्रिप्ट में रखूंगा ताकि …

12 filenames  wget  curl 

मैं बस एक ड्रॉपबॉक्स फाइल सिस्टम का पता लगाने में सक्षम होना चाहता हूं, सीपीयू, मेमोरी, स्टोरेज (यानी, स्थानीय रूप से दूरस्थ फ़ाइलों की प्रतियां सहेजे बिना) पर अतिरिक्त भार के बिना। ऐसा लगता है कि आधिकारिक ग्राहक बहुत अधिक मात्रा में खपत करता है (और सिंकिंग की तरह अस्वाभाविक …

12 wget  fuse  dropbox  hosting-services  protocols 

यदि आप ब्रेस विस्तार का उपयोग करते हैं wget, तो आप क्रमिक रूप से गिने हुए चित्र आसानी से प्राप्त कर सकते हैं: $ wget 'http://www.iqandreas.com/sample-images/100-100-color/'{90..110}'.jpg' यह पहली 10 फाइलों 90.jpgको 99.jpgसिर्फ ठीक करने के लिए लाया गया है, लेकिन 100.jpgबाद में 404 लौटाता है : फ़ाइल को त्रुटि नहीं …

12 bash  shell-script  wget 

wgetआदमी पृष्ठ इस में कहा गया है, के लिए धारा के तहत --random-waitपैरामीटर: Some web sites may perform log analysis to identify retrieval programs such as Wget by looking for statistically significant similarities in the time between requests. [...] A 2001 article in a publication devoted to development on a …

11 wget  man  documentation 

मैं wget के साथ एक url बुला रहा हूं: /usr/bin/wget --read-timeout=7200 https://site_url/s Wget इस मामले में हर 15 मिनट में एक GET अनुरोध करता है, समय समाप्त होने के बावजूद, ऐसा क्यों होता है? कॉल केवल एक बार किया जाना चाहिए, मैं रिट्रीट को कैसे सेट कर सकता हूं? मुझे …

11 linux  rhel  wget 

wget इंटरनेट पर सामान को जल्दी से डाउनलोड करने के लिए एक बहुत ही उपयोगी उपकरण है, लेकिन क्या मैं इसका उपयोग होस्टिंग साइटों, जैसे फ्रीकेशर, आईफाइल.टाइट डिपॉफाइल्स, अपलोडेड, रैपिडशेयर से डाउनलोड करने के लिए कर सकता हूं? यदि हां, तो मैं यह कैसे कर सकता हूं?

11 wget  download  hosting-services