अजगर बहुउद्देशीय कोशिश कर खिड़कियों पर रनटाइम


123

मैं विंडोज़ मशीन पर थ्रेडिंग और मल्टीप्रोसेसिंग का उपयोग करके अपने पहले औपचारिक पायथन कार्यक्रम की कोशिश कर रहा हूं। मैं हालांकि, निम्नलिखित संदेश देने वाले अजगर के साथ प्रक्रियाओं को लॉन्च करने में असमर्थ हूं। बात यह है, मैं अपने धागे मुख्य मॉड्यूल में लॉन्च नहीं कर रहा हूं । थ्रेड्स को एक वर्ग के अंदर एक अलग मॉड्यूल में संभाला जाता है।

EDIT : वैसे यह कोड ubuntu पर ठीक चलता है। खिड़कियों पर बिलकुल नहीं

RuntimeError: 
            Attempt to start a new process before the current process
            has finished its bootstrapping phase.
            This probably means that you are on Windows and you have
            forgotten to use the proper idiom in the main module:
                if __name__ == '__main__':
                    freeze_support()
                    ...
            The "freeze_support()" line can be omitted if the program
            is not going to be frozen to produce a Windows executable.

मेरा मूल कोड बहुत लंबा है, लेकिन मैं कोड के एक संक्षिप्त संस्करण में त्रुटि को पुन: उत्पन्न करने में सक्षम था। यह दो फ़ाइलों में विभाजित है, पहला मुख्य मॉड्यूल है और मॉड्यूल आयात करने के अलावा बहुत कम करता है जो प्रक्रियाओं / थ्रेड्स को संभालता है और एक विधि कहता है। दूसरा मॉड्यूल वह है जहां कोड का मांस है।


testMain.py:

import parallelTestModule

extractor = parallelTestModule.ParallelExtractor()
extractor.runInParallel(numProcesses=2, numThreads=4)

parallelTestModule.py:

import multiprocessing
from multiprocessing import Process
import threading

class ThreadRunner(threading.Thread):
    """ This class represents a single instance of a running thread"""
    def __init__(self, name):
        threading.Thread.__init__(self)
        self.name = name
    def run(self):
        print self.name,'\n'

class ProcessRunner:
    """ This class represents a single instance of a running process """
    def runp(self, pid, numThreads):
        mythreads = []
        for tid in range(numThreads):
            name = "Proc-"+str(pid)+"-Thread-"+str(tid)
            th = ThreadRunner(name)
            mythreads.append(th) 
        for i in mythreads:
            i.start()
        for i in mythreads:
            i.join()

class ParallelExtractor:    
    def runInParallel(self, numProcesses, numThreads):
        myprocs = []
        prunner = ProcessRunner()
        for pid in range(numProcesses):
            pr = Process(target=prunner.runp, args=(pid, numThreads)) 
            myprocs.append(pr) 
#        if __name__ == 'parallelTestModule':    #This didnt work
#        if __name__ == '__main__':              #This obviously doesnt work
#        multiprocessing.freeze_support()        #added after seeing error to no avail
        for i in myprocs:
            i.start()

        for i in myprocs:
            i.join()

@doctorlove मैं इसे python testMain.py
NG Algo

1
ज़रूर - आप एक अगर नाम की जरूरत है == ' मुख्य ' के जवाब और डॉक्स देखें
डॉक्टरो

1
@NGAlgo आपकी स्क्रिप्ट मेरे लिए बहुत मददगार थी, जबकि मैं एक समस्या का निदान कर रहा था, जिसमें मुझे pongongo और मल्टीप्रोसेसिंग की समस्या थी। धन्यवाद!
क्ले

जवाबों:


175

विंडोज पर सबप्रोसेस शुरू में मुख्य मॉड्यूल आयात (यानी निष्पादित) करेंगे। आपको if __name__ == '__main__':मुख्य मॉड्यूल में एक गार्ड को सम्मिलित करने की आवश्यकता है ताकि उप-प्रक्रिया को पुनरावर्ती रूप से बनाया जा सके।

संशोधित testMain.py:

import parallelTestModule

if __name__ == '__main__':    
    extractor = parallelTestModule.ParallelExtractor()
    extractor.runInParallel(numProcesses=2, numThreads=4)

3
(अपने माथे के खिलाफ उसकी हथेली को सूँघता है) दोह! यह काम करता हैं!!!! आपको बहुत - बहुत धन्यवाद! मुझे इस तथ्य की याद आ रही थी कि यह मूल मुख्य मॉड्यूल है जो फिर से आयात हो जाता है! यह सब समय मैं " नाम ==" की कोशिश कर रहा था, जहां मैंने अपनी प्रक्रियाएं शुरू की थीं ।
एनजी एल्गो

1
मैं 'समांतर तारतम्य' आयात नहीं कर सकता। मैं पायथन 2.7 का उपयोग कर रहा हूं। यह बॉक्स से बाहर काम करना चाहिए?
जॉनी

2
@Jonny समानांतर TestModule.py के लिए कोड प्रश्न का हिस्सा है।
Janne Karila

1
@DeshDeepSingh कोड स्निपेट एक स्टैंड-अलोन उदाहरण नहीं है; यह ओपी कोड का एक संशोधन है
जैने करीला जूल

1
@DeshDeepSingh यह मॉड्यूल प्रश्न का हिस्सा है।
जने करिला

25

अपना कोड testMain.py में एक मुख्य फ़ंक्शन के अंदर रखने का प्रयास करें

import parallelTestModule

if __name__ ==  '__main__':
  extractor = parallelTestModule.ParallelExtractor()
  extractor.runInParallel(numProcesses=2, numThreads=4)

डॉक्स देखें :

"For an explanation of why (on Windows) the if __name__ == '__main__' 
part is necessary, see Programming guidelines."

जो कहते हैं

"सुनिश्चित करें कि बिना अनपेक्षित साइड इफेक्ट्स (जैसे कि एक नई प्रक्रिया शुरू करना) के बिना मुख्य मॉड्यूल को नए पायथन दुभाषिया द्वारा सुरक्षित रूप से आयात किया जा सकता है।"

... का उपयोग करके if __name__ == '__main__'


9

हालांकि पहले के उत्तर सही हैं, एक छोटी सी जटिलता है जिस पर टिप्पणी करने में मदद मिलेगी।

यदि आपका मुख्य मॉड्यूल किसी अन्य मॉड्यूल को आयात करता है जिसमें वैश्विक चर या वर्ग के सदस्य चर को परिभाषित किया जाता है और कुछ नई वस्तुओं के लिए (या उपयोग) किया जाता है, तो आपको उसी तरह आयात करना पड़ सकता है:

if __name__ ==  '__main__':
  import my_module

3

जैसा कि @ ओफर ने कहा, जब आप दूसरे पुस्तकालयों या मॉड्यूल का उपयोग कर रहे होते हैं, तो आपको उन सभी को अंदर आयात करना चाहिए if __name__ == '__main__':

तो, मेरे मामले में, इस तरह से समाप्त हो गया:

if __name__ == '__main__':       
    import librosa
    import os
    import pandas as pd
    run_my_program()

0

मेरे मामले में यह कोड में एक साधारण बग था, इसे बनाने से पहले एक चर का उपयोग करना। उपरोक्त समाधानों को आज़माने से पहले वॉर्थ जाँच करें। मुझे यह विशेष त्रुटि संदेश क्यों मिला, भगवान जानते हैं।

हमारी साइट का प्रयोग करके, आप स्वीकार करते हैं कि आपने हमारी Cookie Policy और निजता नीति को पढ़ और समझा लिया है।
Licensed under cc by-sa 3.0 with attribution required.