shared-memory पर टैग किए गए जवाब

मान लीजिए कि मेरे पास मेमोरी सुपीरियर सरणी में एक बड़ा है, मेरे पास एक फ़ंक्शन है funcजो इनपुट के रूप में इस विशाल सरणी में लेता है (कुछ अन्य मापदंडों के साथ)। funcविभिन्न मापदंडों के साथ समानांतर में चलाया जा सकता है। उदाहरण के लिए: def func(arr, param): # …

123 python  numpy  parallel-processing  multiprocessing  shared-memory 

मेरे पास अपनी एक परियोजना के साथ एक मुद्दा है। मैं साझा स्मृति का उपयोग करने के लिए एक अच्छी तरह से प्रलेखित उदाहरण खोजने की कोशिश कर रहा हूं, fork()लेकिन कोई सफलता नहीं मिली। मूल रूप से परिदृश्य यह है कि जब उपयोगकर्ता प्रोग्राम शुरू करता है, तो मुझे …

117 c  linux  fork  shared-memory 

मुझे अक्सर एक बहुत बड़े DataFrame(मिश्रित डेटा प्रकारों) के समूहों में एक फ़ंक्शन लागू करने की आवश्यकता होती है और कई कोर का लाभ उठाना चाहते हैं। मैं समूहों से एक इटरेटर बना सकता हूं और मल्टीप्रोसेसिंग मॉड्यूल का उपयोग कर सकता हूं, लेकिन यह कुशल नहीं है क्योंकि प्रक्रियाओं …

89 python  pandas  multiprocessing  shared-memory 

मेरे पास एक 60GB SciPy Array (मैट्रिक्स) है जिसे मुझे 5+ multiprocessing Processवस्तुओं के बीच साझा करना चाहिए । मैंने सुन्न-साझा देखा और SciPy सूची पर इस चर्चा को पढ़ा । वहाँ दो दृष्टिकोण लग रहे हैं - numpy-sharedmemऔर एक multiprocessing.RawArray()और मैपिंग करने के लिए NumPy dtypes का उपयोग करना …

88 python  numpy  multiprocessing  shared-memory