Meme遊戲伺服器開發日記（二）繞過GIL啟動多線程Python環境

標籤：

        說道Python和多線程，很容易想到GIL，GIL意味著只要是用Python做的多線程程式，就無法利用多個CPU。

        經過一些失敗的嘗試後，我也一度認為GIL是無解的。我們甚至把注意力轉向了IronPython等無鎖Python，但是實際上那樣問題可能更多，比如我們不熟悉mono，mono也沒達到完全成熟的程度。

        直到skynet的QQ群裡一位朋友介紹了另一種載入so的方式，事情才有了180度的變化。

        方法如下：

        1、編譯Python源碼，編譯時間加上參數--enable-shared，編譯成so動態連結程式庫。

        2、找到so，拷貝N份，分別命名為 libpython_1.so, libpython_2.so, ... 等等

        3、用C語言，使用linux下的ldfcn庫，動態載入這些so庫，ldfcn可以保證同名全域變數不衝突。

        

        （C語言源碼，待整理）

        （編譯註意事項，待整理）

        （設定環境變數，待整理）

        用簡單Py指令碼測試，會發現指令碼的運行確實是獨立的。但是如果用了 import time，則會造成段錯誤。

        原因是用這種方法，以後import的各種python的庫，如果是C語言擴充的，那麼就會因為重複而衝突。

        解決方案是在編譯Python時，加入--enable-time，把time庫和python庫編譯到一起，就能解決這個問題。

        （另一種備選方案是找到time源碼，在庫名後加上數字，也編出N份time_1, time_2... 等等，在指令碼裡也分別import不同的time庫，即可。）

        由於我們的Python環境禁止在指令碼內啟動多線程，所以可以加入編譯參數--without-threads，這樣還能稍微提高一點運行效率。

著作權聲明：本文為博主原創文章，未經博主允許不得轉載。

Meme遊戲伺服器開發日記（二）繞過GIL啟動多線程Python環境