मैं एक अपेक्षाकृत कम-ट्रैफ़िक साइट चला रहा हूं जो साइट अपडेट के बाद सप्ताह में एक बार आगंतुकों में एक बड़ी स्पाइक का अनुभव करती है। सप्ताह के बाकी दिनों की तुलना में इस स्पाइक के दौरान साइट का प्रदर्शन बेहद खराब है। सर्वर पर वास्तव में लोड बहुत कम रहता है, मज़बूती से 10% सीपीयू के तहत और 30% रैम के तहत (हार्डवेयर वास्तव में हम क्या कर रहे हैं इसके लिए ओवरकिल होना चाहिए), लेकिन किसी कारण के लिए अपाचे मात्रा का सामना करने में असमर्थ प्रतीत होता है अनुरोधों का। हम आरएचईएल 5.7, कर्नेल 2.6.18-274.7.1.el5, x86_64 पर अपाचे 2.2.3 चला रहे हैं।
अब के साथ बंद घंटों के दौरान इस व्यवहार को पुन: पेश करने का प्रयास कर रहा हूं, मैं लगभग 256 उपयोगकर्ताओं से अधिक होने पर प्रदर्शन में एक बड़ी गिरावट पा रहा हूं। सबसे छोटे संभव उपयोग मामले के साथ परीक्षण चलाना, मैं (स्थिर पाठ फ़ाइल को पुनः प्राप्त किया जा सकता है, कुल 223 बाइट्स) प्रदर्शन 245 सामान्य अनुरोधों के साथ लगातार सामान्य है:
Connection Times (ms)
min mean[+/-sd] median max
Connect: 15 25 5.8 24 37
Processing: 15 65 22.9 76 96
Waiting: 15 64 23.0 76 96
Total: 30 90 27.4 100 125
Percentage of the requests served within a certain time (ms)
50% 100
66% 108
75% 111
80% 113
90% 118
95% 120
98% 122
99% 123
100% 125 (longest request)
लेकिन जैसे ही मैं एक साथ 265 अनुरोधों पर शाबाशी देता हूं, उनमें से एक उपसमुच्चय को पूरा करने के लिए एक बेतुकी राशि लेना शुरू कर देता है:
Connection Times (ms)
min mean[+/-sd] median max
Connect: 13 195 692.6 26 3028
Processing: 15 65 21.3 72 100
Waiting: 15 65 21.3 71 99
Total: 32 260 681.7 101 3058
Percentage of the requests served within a certain time (ms)
50% 101
66% 108
75% 112
80% 116
90% 121
95% 3028
98% 3040
99% 3044
100% 3058 (longest request)
ये परिणाम कई रनों में बहुत सुसंगत हैं। चूंकि उस बॉक्स में अन्य ट्रैफ़िक जा रहा है, इसलिए मुझे यकीन नहीं है कि हार्ड कटऑफ कहाँ होगा, अगर वहाँ एक है, लेकिन यह संदिग्ध रूप से 256 के करीब लगता है।
स्वाभाविक रूप से, मैंने यह माना कि यह प्रीफ़ॉर्क में थ्रेड लिमिट के कारण हो रहा था, इसलिए मैंने उपलब्ध थ्रेड की संख्या को दोगुना करने और थ्रेड के पूल को बढ़ने से रोकने और अनावश्यक रूप से सिकुड़ने से कॉन्फ़िगरेशन को समायोजित किया:
<IfModule prefork.c>
StartServers 512
MinSpareServers 512
MaxSpareServers 512
ServerLimit 512
MaxClients 512
MaxRequestsPerChild 5000
</IfModule>
mod_status पुष्टि करता है कि मैं अब 512 उपलब्ध थ्रेड्स के साथ चल रहा हूं
8 requests currently being processed, 504 idle workers
हालाँकि, 265 युगपत अनुरोधों का प्रयास अभी भी पहले के समान परिणाम देता है
Connection Times (ms)
min mean[+/-sd] median max
Connect: 25 211 714.7 31 3034
Processing: 17 94 28.6 103 138
Waiting: 17 93 28.5 103 138
Total: 57 306 700.8 138 3071
Percentage of the requests served within a certain time (ms)
50% 138
66% 145
75% 150
80% 161
90% 167
95% 3066
98% 3068
99% 3068
100% 3071 (longest request)
प्रलेखन (और स्टैक एक्सचेंज) के परिमार्जन के बाद मुझे इस अड़चन को दूर करने के प्रयास के लिए आगे की कॉन्फ़िगरेशन सेटिंग्स के लिए नुकसान हो रहा है। क्या कुछ ऐसा है जो मुझे याद आ रहा है? क्या मुझे अपाचे के बाहर जवाब ढूंढना शुरू करना चाहिए? क्या किसी और ने इस व्यवहार को देखा है? किसी भी तरह की सहायता का स्वागत किया जाएगा।
संपादित करें:
लादादादा की सलाह के अनुसार, मैंने अपाचे के खिलाफ स्ट्रेस चलाया। मैंने कुछ बार -T और -T के साथ प्रयास किया और सामान्य से कुछ भी नहीं खोज सका। मैंने तब स्ट्रेस -c चलाने की कोशिश की, जो वर्तमान में चल रही सभी अपाचे प्रक्रियाओं के खिलाफ है, और यह मिला:
% time seconds usecs/call calls errors syscall
------ ----------- ----------- --------- --------- ----------------
22.09 0.317836 5 62128 4833 open
19.91 0.286388 4 65374 1896 lstat
13.06 0.187854 0 407433 pread
10.70 0.153862 6 27076 semop
7.88 0.113343 3 38598 poll
6.86 0.098694 1 100954 14380 read
(... abdridged)
यदि मैं इस अधिकार को पढ़ रहा हूं (और मेरे साथ सहन कर रहा हूं, जैसा कि मैं बहुत बार धारा का उपयोग नहीं करता हूं) तो कोई भी सिस्टम कॉल उस समय की राशि का हिसाब नहीं दे सकता है जो ये अनुरोध ले रहे हैं। यह लगभग ऐसा लगता है कि कार्यकर्ता थ्रेड्स के लिए भी अनुरोधों से पहले अड़चन आ रही है।
संपादित करें 2:
जैसा कि कई लोगों ने सुझाव दिया, मैंने वेब सर्वर पर फिर से परीक्षण चलाया (पहले यह परीक्षण एक तटस्थ इंटरनेट स्थान से चलाया गया था)। परिणाम आश्चर्यजनक थे:
Connection Times (ms)
min mean[+/-sd] median max
Connect: 0 11 6.6 12 21
Processing: 5 247 971.0 10 4204
Waiting: 3 245 971.3 7 4204
Total: 16 259 973.3 21 4225
Percentage of the requests served within a certain time (ms)
50% 21
66% 23
75% 24
80% 24
90% 26
95% 4225
98% 4225
99% 4225
100% 4225 (longest request)
निचला-रेखा का समय इंटरनेट-आधारित परीक्षण के समान है, लेकिन स्थानीय रूप से चलाने पर यह लगातार थोड़ा खराब हो जाता है। अधिक दिलचस्प बात यह है कि प्रोफ़ाइल नाटकीय रूप से बदल गई है। जबकि लंबे समय से चल रहे अनुरोधों के थोक समय को "कनेक्ट" करने में खर्च किया गया था, अब अड़चन प्रसंस्करण या प्रतीक्षा में प्रतीत होती है। मुझे संदेह है कि यह वास्तव में एक अलग मुद्दा हो सकता है जिसे पहले नेटवर्क सीमाओं द्वारा नकाब पहना जा रहा था।
अपाचे होस्ट के रूप में उसी स्थानीय नेटवर्क पर एक और मशीन से फिर से परीक्षण चलाना, मैं बहुत अधिक उचित परिणाम देख रहा हूं:
Connection Times (ms)
min mean[+/-sd] median max
Connect: 1 2 0.8 2 4
Processing: 13 118 99.8 205 222
Waiting: 13 118 99.7 204 222
Total: 15 121 99.7 207 225
Percentage of the requests served within a certain time (ms)
50% 207
66% 219
75% 220
80% 221
90% 222
95% 224
98% 224
99% 225
100% 225 (longest request)
ये दोनों परीक्षण एक साथ कई सवाल खड़े करते हैं, लेकिन इससे अलग, एक निश्चित मात्रा में लोड के तहत होने वाले कुछ प्रकार के गंभीर नेटवर्क अड़चन के लिए एक सम्मोहक मामला है। मुझे लगता है कि अगले कदम अलग से नेटवर्क परत की जांच करेंगे।