RuntimeError na windows próby wieloprocesorowe Pythona

Question

Próbuję mój pierwszy formalny program Pythona przy użyciu wątków i Multiprocessing na komputerze z systemem Windows. Nie mogę jednak uruchomić procesów, ponieważ python podaje następujący komunikat. Chodzi o to, że nie uruchamiam swoich wątków w module głównym. Wątki są obsługiwane w oddzielnym module wewnątrz klasy.

EDYCJA: Przy okazji ten kod działa dobrze na ubuntu. Nie dość na oknach

RuntimeError: 
      Attempt to start a new process before the current process 
      has finished its bootstrapping phase. 
      This probably means that you are on Windows and you have 
      forgotten to use the proper idiom in the main module: 
       if __name__ == '__main__': 
        freeze_support() 
        ... 
      The "freeze_support()" line can be omitted if the program 
      is not going to be frozen to produce a Windows executable. 

Mój oryginalny kod jest dość długa, ale udało mi się odtworzyć błąd w skróconej wersji kodu. Jest podzielony na dwa pliki, pierwszy jest modułem głównym i robi niewiele poza zaimportowaniem modułu, który obsługuje procesy/wątki i wywołuje metodę. Drugi moduł to mięso kodu.

---

testMain.py:

import parallelTestModule 

extractor = parallelTestModule.ParallelExtractor() 
extractor.runInParallel(numProcesses=2, numThreads=4) 

---

parallelTestModule.py:

import multiprocessing 
from multiprocessing import Process 
import threading 

class ThreadRunner(threading.Thread): 
    """ This class represents a single instance of a running thread""" 
    def __init__(self, name): 
     threading.Thread.__init__(self) 
     self.name = name 
    def run(self): 
     print self.name,'\n' 

class ProcessRunner: 
    """ This class represents a single instance of a running process """ 
    def runp(self, pid, numThreads): 
     mythreads = [] 
     for tid in range(numThreads): 
      name = "Proc-"+str(pid)+"-Thread-"+str(tid) 
      th = ThreadRunner(name) 
      mythreads.append(th) 
     for i in mythreads: 
      i.start() 
     for i in mythreads: 
      i.join() 

class ParallelExtractor:  
    def runInParallel(self, numProcesses, numThreads): 
     myprocs = [] 
     prunner = ProcessRunner() 
     for pid in range(numProcesses): 
      pr = Process(target=prunner.runp, args=(pid, numThreads)) 
      myprocs.append(pr) 
#  if __name__ == 'parallelTestModule': #This didnt work 
#  if __name__ == '__main__':    #This obviously doesnt work 
#  multiprocessing.freeze_support()  #added after seeing error to no avail 
     for i in myprocs: 
      i.start() 

     for i in myprocs: 
      i.join() 

Answer 1

W Windows podprocesy będzie importować (czyli wykonać) w module głównym początek. Trzeba chronić główny kod tak, aby uniknąć tworzenia podprocesów rekurencyjnie:

import parallelTestModule 

if __name__ == '__main__':  
    extractor = parallelTestModule.ParallelExtractor() 
    extractor.runInParallel(numProcesses=2, numThreads=4) 

Answer 2

Spróbuj umieścić swój kod wewnątrz funkcji main w testMain.py

import parallelTestModule 

if __name__ == '__main__': 
    extractor = parallelTestModule.ParallelExtractor() 
    extractor.runInParallel(numProcesses=2, numThreads=4) 

Zobacz docs:

"For an explanation of why (on Windows) the if __name__ == '__main__' 
part is necessary, see Programming guidelines." 

podana jako

"Upewnij się, że moduł główny można bezpiecznie importować za pomocą nowego interpretera języka Python , nie powodując niezamierzonych efektów ubocznych (takich jak uruchomienie nowego procesu)."

... za pomocą if __name__ == '__main__'

Answer 3

mimo wcześniejszych odpowiedzi są prawidłowe, nie jest mała komplikacja że to pomoże uwaga w sprawie.

W przypadku, gdy główny moduł importuje inny moduł, w którym zmienne globalne lub zmienne składowe klasy są definiowane i zainicjowany (lub używając) kilka nowych obiektów, być może trzeba będzie warunkiem że import w ten sam sposób:

jeśli nazwa == 'główny '': import my_module