Python multiprocessing 使用手記[1] – 進程模型

原文：

http://blog.ftofficer.com/2009/11/using-python-multiprocessing-1-process-model/

 

首先從multiprocessing的進程模型開始看。

multiprocessing的目的是建立一個介面和python.threading
類似介面的庫，用多進程的方式來並發處理。因此建立一個新的進程的的方法也
和python.threading很像：

 

import multiprocessing</p><p>def dosomething(a,b,c): pass</p><p>p = multiprocessing.Process(target=dosomething, args=(1,2,3))<br />p.start()<br />p.join()

 

建立的這個新的進程在*nix上面使用的是fork，這意味著子進程開始執行的時候具有與父進程相同的全部內容。請記住這點，這個將是下面我們討論
基於繼承的對象共用的基礎。所謂基於繼承的對象共用，是說在建立子進程之前由父進程初始化的某些對象可以在子進程當中直接存取到。在Windows平台
上，因為沒有fork語義的系統調用，基於繼承的共用對象比*nix有更多的限制，最主要就是體現在要求Process的__init__當中的參數必須可以Pickle
。

 

但是，並不是所有的對象都是可以通過繼承來共用，只有multiprocessing庫當中的某些對象才可以。例如Queue，同步對象，共用變數，Manager等等。

 

在一個multiprocessing庫的典型使用情境下，所有的子進程都是由一個父進程啟動起來的，這個父進程稱為master進程。這個父進程
非常重要，它會管理一系列的對象狀態，一旦這個進程退出，子進程很可能會處於一個很不穩定的狀態，因為它們共用的狀態也許已經被損壞掉了。因此，這個進程
最好儘可能做最少的事情，以便保持其穩定性。