用Django+MySQL+Celery+RabbitMQ實現一個分布式測試系統

標籤：http   io   os   使用   ar   資料   div   2014   art   

最近做了一個分布式的測試系統，目前實現了主要的架構和MVP（minimum viable product）版本的準系統。在架構設計、資料庫設計、具體實現等方面，（算是目前我做的架構最複雜的測試系統）還是花了2-3周的時間，終於MVP 版本算是出來了（今後根據需求和精力再考慮豐富更多的功能）。

使用Python開發，介面部分目前還沒做；架構上使用到的東西，主要使用了：Django+DjangoRestFramework+MySQL+Celery+RabbitMQ。
如：

architecture diagram of test execution API

（此圖在：http://www.processon.com/view/link/53a6e2440cf266a8fabce8b0）
應該來說，該系統的可擴充性還是比較好的，任務都是非同步處理，而且可以實現分布式的worker來同時處理RabbitMQ中的訊息。今後，如果調用量到了很大的數量級，還可以好好最佳化和水平擴充更多的worker。

在搭建該系統的過程中，由於以前都沒在項目中實際用到這些技術，所以還是走了各種彎路，踩過一些坑。不細說了，參考資料中的網頁連結或許值得一讀。

參考資料：

http://mathematism.com/2010/02/16/message-queues-django-and-celery-quick-start/

http://maemual.net/?p=543

http://ashin.sinaapp.com/article/137/

用Django+MySQL+Celery+RabbitMQ實現一個分布式測試系統