PostgreSQL ERROR: अधिक कनेक्शन की अनुमति नहीं है

Question

आप PostgreSQL कनेक्शन कैसे मुक्त करते हैं जो क्लाइंट एप्लिकेशन द्वारा ठीक से बंद नहीं किया जा रहा है?

मेरे पास एक डेटा-माइनिंग ऐप है जो कई प्रक्रियाओं को अंजाम देता है, डेटा को पुनः प्राप्त करने के लिए एक स्थानीय पोस्टग्रेक्यूएल 9.1 डेटाबेस के सभी कनेक्शन। यह कुछ घंटों के लिए ठीक चलता है, लेकिन फिर त्रुटि से मर जाता है:

FATAL:  remaining connection slots are reserved for non-replication superuser connections

इस पर शोध करने से पता चलता है कि यह सबसे अधिक संभावना है कि ऐप ठीक से कनेक्शन बंद नहीं कर रहा है। हालांकि, मारे गए ऐप के साथ, इन कनेक्शनों को कभी भी मुक्त नहीं किया जाता है। क्या उस समय का कुछ प्रकार नहीं है जहां PostgreSQL स्वचालित रूप से एक कनेक्शन बंद कर देगा?

मैंने पोस्टग्रेज के अधिकतम_कनेक्ट को 100 से बढ़ाकर 200 करने की भी कोशिश की, लेकिन फिर से शुरू करने से मुझे त्रुटि मिली:

2014-02-23 10:51:15 EST FATAL:  could not create shared memory segment: Invalid argument
2014-02-23 10:51:15 EST DETAIL:  Failed system call was shmget(key=5432001, size=36954112, 03600).
2014-02-23 10:51:15 EST HINT:  This error usually means that PostgreSQL's request for a shared memory segment exceeded your kernel's SHMMAX parameter.  You can either reduce the request size or reconfigure the kernel with larger SHMMAX.  To reduce the request size (currently 36954112 bytes), reduce PostgreSQL's shared memory usage, perhaps by reducing shared_buffers or max_connections.
    If the request size is already small, it's possible that it is less than your kernel's SHMMIN parameter, in which case raising the request size or reconfiguring SHMMIN is called for.
    The PostgreSQL documentation contains more information about shared memory configuration.

मेरा सिस्टम उबंटू 12.04 है और इसमें 8GB मेमोरी है, और अन्य सभी पीजी सेटिंग्स डिफॉल्ट हैं, इसलिए मुझे यकीन नहीं है कि यह क्यों सोचता है कि सिस्टम में पर्याप्त मेमोरी नहीं है।

मैंने तब पूल के लिए pgbouncer का उपयोग करने और कनेक्शन का पुन: उपयोग करने का प्रयास किया। यह थोड़ा बेहतर काम करने के लिए लग रहा था, लेकिन यह भी अंततः कनेक्शन से बाहर भाग गया, मुझे त्रुटि दे रहा है:

ERROR:  no more connections allowed

मैं इस समस्या का और निदान कैसे करूं?

Comments

Pg_stat_activity

— ETL

Answer 1

आप अपनी अधिकतम साझा मेमोरी सेटिंग्स को बदलकर कनेक्शन की अधिकतम संख्या बढ़ा सकते हैं, हालांकि यदि समस्या यह है कि आपके कनेक्शन बंद नहीं हो रहे हैं, तो आपको वास्तव में इसका समाधान करना चाहिए। यदि सॉफ़्टवेयर आपके नियंत्रण से बाहर है और कनेक्शन बंद न करके छोटी गाड़ी है, तो आप कुछ क्रॉन जॉब का उपयोग कर सकते हैं जैसे:

select pg_terminate_backend(procpid)
from pg_stat_activity
where usename = 'yourusername'
 and current_query = '<IDLE>'
 and query_start < current_timestamp - interval '5 minutes'
;

यही कारण है कि मैं एक समान छोटी गाड़ी सॉफ्टवेयर से लीक कनेक्शन को मारने के लिए करता हूं।

वैकल्पिक रूप से, आप अपने बगगी सॉफ़्टवेयर को एक कनेक्शन पूल के माध्यम से चलाने में सक्षम हो सकते हैं जिसमें निष्क्रिय कनेक्शन जैसे pgpool को मारने के लिए समान कार्यक्षमता है।

नोट : Postgres के नए संस्करणों में थोड़ा अलग कॉलम नाम हैं:

select pg_terminate_backend(pid)
from pg_stat_activity
where usename = 'YOURDATABASEUSERNAME*'
 and state = 'idle'
 and query_start < current_timestamp - interval '5 minutes'
;

Comments

9.6 पर यह काम करना चाहिए? जब मैं कोशिश करता हूं तो मुझे मिलता हैpostgres=> select pg_terminate_backend(procpid) from pg_stat_activity where current_query = '<IDLE>' and query_start < current_timestamp - interval '5 minutes'; ERROR: column "procpid" does not exist LINE 1: select pg_terminate_backend(procpid) from pg_stat_activity ...

— मैजिक

इसके pidबजाय procpidनए संस्करणों में है।

— ईटीएल

Answer 2

PostgreSQL के नए संस्करणों के लिए:

select pg_terminate_backend(pid)
from pg_stat_activity
where usename = 'YOUR_DATABASE_USERNAME*'
 and state = 'idle'
 and query_start < current_timestamp - interval '5 minutes'
;

उपरोक्त आपको अपने निष्क्रिय कनेक्शन को समाप्त करने में मदद करेगा। मैं एक ही मुद्दा था, लेकिन यह डेटाबेस से कनेक्ट करने के लिए मेरे फ्लास्क और SQLAlchemy तरीके के साथ एक समस्या बन गया।

* usename एक टाइपो नहीं है

Answer 3

कर्नेल संसाधनों के प्रबंधन पर पीजी दस्तावेज़ । इससे आपको कर्नेल में मेमोरी लिमिट बढ़ाने में मदद करनी चाहिए।