Django / Apache / mod_wsgi साइट पर उच्च CPU लोड


10

अपाचे बेंच के साथ AWS छोटे उदाहरण (Ubuntu 10.04) पर एक django 1.21 / Apache / mod_wsgi कॉन्फ़िगरेशन का परीक्षण लोड करना कम समवर्ती अनुरोधों पर अत्यधिक उच्च CPU लोड (uptime और vmstat का उपयोग करके) दिखा रहा है:

ab -c 5 -n 1000 "my_url"

... इस अपटाइम आउटपुट का कारण बनता है:

18:04:54 up 9 days, 16:54,  3 users,  load average: 5.33, 2.45, 1.91

अपाचे बेंच कॉन्क्वेरी मूल्य 2 के साथ सीपीयू भी 100% पर है। मैं एक ही क्षेत्र या क्षेत्र में एक अलग AWS उदाहरण से Apache बेंच चला रहा हूं। समस्या क्या है या इस पर मुझे कैसे बहस जारी रखनी चाहिए इस पर विचार करें?

विवरण:

  • हताशा से बाहर, मैंने एक साधारण "हैलो वर्ल्ड" दृश्य (कोई DB कॉल आदि) के साथ एक वेनिला django प्रोजेक्ट / ऐप स्थापित किया। समान परिणाम। इसलिए मुझे संदेह है कि यह मेरा एप्लीकेशन कोड है।
  • लोड टेस्ट के दौरान मेमोरी का उपयोग ठीक लगता है।

यहाँ लोड परीक्षण से पहले / दौरान / बाद में vmstat आउटपुट है:

procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu----
r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa
0  0      0 1034484  94848 321320    0    0     0     0   13   29  0  0 100  0
6  0      0 1032916  94848 321328    0    0     0     0  262  720  4 32 12  0
6  0      0 1031684  94848 321336    0    0     0     0  312  796  7 33  0  0
8  0      0 1030892  94856 321344    0    0     0    12  302  763  4 36  0  0
...
6  0      0 1030268  94864 321376    0    0     0     0  302  843  3 39  0  0
0  0      0 1032452  94868 321380    0    0     0    12  183  516  3 22 34  0
1  0      0 1033988  94868 321388    0    0     0     0   24   38  1  2 92  0
0  0      0 1033996  94868 321388    0    0     0     0   17   28  0  0 100  0
  • मैं Apache2 का प्रीफ़ॉर्क संस्करण चला रहा हूं क्योंकि मैं भी वर्डप्रेस चला रहा हूं, जो PHP पर निर्भर करता है। (PHP अपाचे कार्यकर्ता संस्करण के साथ अच्छा नहीं खेलता है)

यहां मेरी वर्चुअल होस्ट फ़ाइल है:

WSGIPythonHome /home/xxx/webapps/ve/api
<VirtualHost *:80>
        ServerAdmin webmaster@localhost
        ServerName  app.xxx.mobi

        WSGIDaemonProcess snaplive user=www-data group=www-data processes=10 threads=1 maximum-requests=10000
        WSGIProcessGroup snaplive
        WSGIScriptAlias / /home/xxx/webapps/api/settings/apache/prod.wsgi
        DocumentRoot /home/xxx/webapps/api/static
        ErrorLog /var/log/apache2/django-live/error.log
        CustomLog /var/log/apache2/django-live/access.log combined
</VirtualHost>

यहाँ मेरी httpd.conf फ़ाइल है:

Alias /media /home/xxx/Django-1.2.1/django/contrib/admin/media
LoadModule headers_module /usr/lib/apache2/modules/mod_headers.so

StartServers 2
MinSpareServers 2
MaxSpareServers 5
MaxClients 50
MaxRequestsPerChild 3000
ServerLimit 8
Keepalive off
HostnameLookups Off

यहाँ मेरी wsgi फ़ाइल है:

import os
import sys
sys.stdout = sys.stderr

from django.core.handlers.wsgi import WSGIHandler
os.environ['DJANGO_SETTINGS_MODULE'] = 'settings'
application = WSGIHandler()

sys.path.append("/home/xxx/webapps/api")

लोड परीक्षण के दौरान एक ब्राउज़र से django url को हिट करके, मैंने गुणात्मक रूप से पुष्टि की है कि उच्च CPU लोड प्रदर्शन को प्रभावित कर रहा है।

मैंने पढ़ा है कि यह महत्वपूर्ण नहीं हो सकता है, लेकिन मैं अपनी त्रुटि लॉग में इसे बहुत देख रहा हूं:

[Sun Sep 19 18:04:58 2010] [error] Exception KeyError: KeyError(-1218693376,) in <module 'threading' from '/usr/lib/python2.6/threading.pyc'> ignored

यहाँ मेरे अपाचे बेंच परिणाम हैं, मामले में सहायक:

Server Software:        Apache/2.2.14
Server Hostname:        app.xxx.mobi
Server Port:            80

Document Path:          /plist_catalog/test_data
Document Length:        0 bytes

Concurrency Level:      5
Time taken for tests:   27.720 seconds
Complete requests:      1000
Failed requests:        0
Write errors:           0
Non-2xx responses:      1000
Total transferred:      269000 bytes
HTML transferred:       0 bytes
Requests per second:    36.08 [#/sec] (mean)
Time per request:       138.598 [ms] (mean)
Time per request:       27.720 [ms] (mean, across all concurrent requests)
Transfer rate:          9.48 [Kbytes/sec] received

Connection Times (ms)
              min  mean[+/-sd] median   max
Connect:        1    2   8.5      1      88
Processing:     9  136 176.9     81    1182
Waiting:        9  135 176.6     81    1182
Total:         10  138 176.7     83    1183

Percentage of the requests served within a certain time (ms)
  50%     83
  66%     98
  75%    128
  80%    140
  90%    423
  95%    576
  98%    727
  99%    819
 100%   1183 (longest request)

जवाबों:


2

मुद्दा यह था कि मैंने apache2-mpm-prefork के बजाय apache2-mpm-itk पैकेज स्थापित किया था। apache2-mpm-itk, apache2-mpm-prefork से लिया गया है, लेकिन किसी कारण से, mod_wsgi के साथ उपयोग किए जाने पर अच्छा प्रदर्शन नहीं किया।


ITK MPM और mod_wsgi का उपयोग करते समय, mod_wsgi डेमन मोड का उपयोग करने और एम्बेडेड प्रक्रियाओं में पायथन इंटरप्रेटर उपयोग को अक्षम करने की सिफारिश की जाती है। यदि एम्बेडेड मोड का उपयोग किया जाता है तो आप CGI की तरह हर अनुरोध पर अपना आवेदन लोड कर रहे हैं।
ग्राहम डुप्लेटन
हमारी साइट का प्रयोग करके, आप स्वीकार करते हैं कि आपने हमारी Cookie Policy और निजता नीति को पढ़ और समझा लिया है।
Licensed under cc by-sa 3.0 with attribution required.