পাইথন মাল্টিপ্রসেসিং চেষ্টা করে উইন্ডোজে রানটাইম এয়ারর

Question

আমি উইন্ডোজ মেশিনে থ্রেডিং এবং মাল্টিপ্রসেসিং ব্যবহার করে আমার প্রথম আনুষ্ঠানিক পাইথন প্রোগ্রামটি চেষ্টা করছি। পাইথনটি নিম্নলিখিত বার্তাটি দিয়ে আমি প্রক্রিয়াগুলি চালু করতে অক্ষম। বিষয়টি হ'ল, আমি আমার থ্রেডগুলি মূল মডিউলে চালু করছি না । থ্রেডগুলি একটি শ্রেণীর অভ্যন্তরে একটি পৃথক মডিউলে পরিচালনা করা হয়।

সম্পাদনা করুন : উবুন্টুতে এই কোডটি ঠিকঠাকভাবে চলে। উইন্ডোতে বেশ নয়

RuntimeError: 
            Attempt to start a new process before the current process
            has finished its bootstrapping phase.
            This probably means that you are on Windows and you have
            forgotten to use the proper idiom in the main module:
                if __name__ == '__main__':
                    freeze_support()
                    ...
            The "freeze_support()" line can be omitted if the program
            is not going to be frozen to produce a Windows executable.

আমার মূল কোডটি বেশ দীর্ঘ, তবে আমি কোডটির একটি সংক্ষিপ্ত সংস্করণে ত্রুটিটি পুনরুত্পাদন করতে সক্ষম হয়েছি। এটি দুটি ফাইলে বিভক্ত, প্রথমটি মূল মডিউল এবং এটি মডিউলটি আমদানি করা ছাড়া খুব সামান্য কিছু করে যা প্রসেস / থ্রেড পরিচালনা করে এবং একটি পদ্ধতি কল করে। দ্বিতীয় মডিউলটি যেখানে কোডের মাংস।

---

testMain.py:

import parallelTestModule

extractor = parallelTestModule.ParallelExtractor()
extractor.runInParallel(numProcesses=2, numThreads=4)

---

parallelTestModule.py:

import multiprocessing
from multiprocessing import Process
import threading

class ThreadRunner(threading.Thread):
    """ This class represents a single instance of a running thread"""
    def __init__(self, name):
        threading.Thread.__init__(self)
        self.name = name
    def run(self):
        print self.name,'\n'

class ProcessRunner:
    """ This class represents a single instance of a running process """
    def runp(self, pid, numThreads):
        mythreads = []
        for tid in range(numThreads):
            name = "Proc-"+str(pid)+"-Thread-"+str(tid)
            th = ThreadRunner(name)
            mythreads.append(th) 
        for i in mythreads:
            i.start()
        for i in mythreads:
            i.join()

class ParallelExtractor:    
    def runInParallel(self, numProcesses, numThreads):
        myprocs = []
        prunner = ProcessRunner()
        for pid in range(numProcesses):
            pr = Process(target=prunner.runp, args=(pid, numThreads)) 
            myprocs.append(pr) 
#        if __name__ == 'parallelTestModule':    #This didnt work
#        if __name__ == '__main__':              #This obviously doesnt work
#        multiprocessing.freeze_support()        #added after seeing error to no avail
        for i in myprocs:
            i.start()

        for i in myprocs:
            i.join()

Comments

@ ডক্টরলভ আমি এটিকে পাইথন টেস্টম্যান হিসাবে চালাচ্ছি মেইন.পি

— এনজি আলগো

অবশ্যই - আপনার যদি প্রয়োজন তবে একটি নাম প্রয়োজন == ' প্রধান ' উত্তর এবং ডক্স দেখুন

— ই

@ এনজিএলগো আমি যখন পাইমঙ্গো এবং মাল্টিপ্রসেসিংয়ের সাথে কোনও সমস্যাটি ডিবাগ করছিলাম তখন আপনার স্ক্রিপ্টটি আমার পক্ষে খুব সহায়ক হয়েছিল। ধন্যবাদ!

— ক্লে

Answer 1

উইন্ডোজে সাব-প্রসেসিসগুলি শুরুতে মূল মডিউলটি আমদানি করে (অর্থাত্ কার্যকর করা হবে)। if __name__ == '__main__':পুনরাবৃত্তভাবে সাবপ্রসেসগুলি তৈরি এড়াতে আপনাকে মূল মডিউলে একটি প্রহরী সন্নিবেশ করাতে হবে।

সংশোধিত testMain.py:

import parallelTestModule

if __name__ == '__main__':    
    extractor = parallelTestModule.ParallelExtractor()
    extractor.runInParallel(numProcesses=2, numThreads=4)

Comments

(তার কপাল তার হাতের তালুতে আঘাত করে) দোহ! এটি কাজ করে !!!! তোমাকে অনেক ধন্যবাদ! আমি আসল মূল মডিউলটি যা আবার আমদানি হয়ে যায় তা হারিয়ে যাচ্ছিলাম! এই সমস্ত সময় আমি যেখানে আমার প্রক্রিয়াগুলি চালু করেছি ঠিক তার আগে " নাম ==" চেক করার চেষ্টা করছিলাম।

— এনজি অ্যালগো

আমি 'প্যারালাল টেস্টমোডুল' আমদানি করতে পারি না। আমি পাইথন ২.7 ব্যবহার করছি। এটি বাক্সের বাইরে কাজ করা উচিত?

— জনি

@ জনি প্যারালাল টেস্টমোডুল.পি এর কোডটি প্রশ্নের অংশ।

— জান্নে করিলা

@ দেশদীপসিংহ কোড স্নিপেট এককভাবে উদাহরণ নয়; এটি ওপি-র কোডের একটি পরিবর্তন

— জান্নে করিলা

@ দেশদীপসিংহ module মডিউলটি এই প্রশ্নের একটি অংশ।

— জান্নে কারিলা

Answer 2

আপনার কোডকে টেস্টমেইন.পি-তে একটি প্রধান ফাংশনের ভিতরে রাখার চেষ্টা করুন

import parallelTestModule

if __name__ ==  '__main__':
  extractor = parallelTestModule.ParallelExtractor()
  extractor.runInParallel(numProcesses=2, numThreads=4)

দস্তাবেজগুলি দেখুন :

"For an explanation of why (on Windows) the if __name__ == '__main__' 
part is necessary, see Programming guidelines."

যা বলে

"নিশ্চিত হয়ে নিন যে মূল মডিউলটি অনিচ্ছাকৃত পার্শ্ব প্রতিক্রিয়া সৃষ্টি না করেই নতুন পাইথন দোভাষী দ্বারা নিরাপদে আমদানি করা যায় (যেমন একটি নতুন প্রক্রিয়া শুরু করা)।"

... ব্যবহার করে if __name__ == '__main__'

Answer 3

যদিও পূর্বের উত্তরগুলি সঠিক, তবে একটি ছোট্ট জটিলতা রয়েছে যা এটি মন্তব্য করতে সহায়তা করবে।

আপনার প্রধান মডিউলটি অন্য একটি মডিউল আমদানি করে যেখানে বৈশ্বিক ভেরিয়েবল বা বর্গ সদস্যের ভেরিয়েবলগুলি কিছু নতুন অবজেক্টের (বা ব্যবহার করে) সংজ্ঞায়িত করা এবং প্রারম্ভিক করা হয়েছে, আপনার শর্ত থাকতে পারে যে একইভাবে আমদানি করতে হবে:

if __name__ ==  '__main__':
  import my_module

Answer 4

@ ওফার যেমনটি বলেছে, আপনি যখন অন্য লাইব্রেরি বা মডিউল ব্যবহার করছেন তখন আপনার সমস্তটি ভিতরে থাকা উচিত if __name__ == '__main__':

সুতরাং, আমার ক্ষেত্রে, এইভাবে শেষ হয়েছে:

if __name__ == '__main__':       
    import librosa
    import os
    import pandas as pd
    run_my_program()

Answer 5

আমার ক্ষেত্রে এটি কোডে একটি সহজ বাগ ছিল, এটি তৈরির আগে ভেরিয়েবল ব্যবহার করে। উপরোক্ত সমাধানগুলি চেষ্টা করার আগে এটি পরীক্ষা করে দেখুন। কেন আমি এই বিশেষ ত্রুটি বার্তা পেয়েছি, প্রভু জানেন।