推薦 — 《分布式系統的工程化開發方法》

自打google將它的MapReduce，GFS等等發布之後，分布式系統這個概念這幾年是越發的紅火了。當然，這也和大量的海量資料處理的需求息息相關。於是乎，越來越多的分布式專家也如雨後春筍般冒了出來。我曾經也以非常仰慕的心情去拜讀某些專家寫出來的文章，結果發現這幫傢伙無非是做過一些機器間的服務調用（比如SOAP），要麼就是配置過load balancer，做過負載平衡，進階些的就拿distributed hash table這樣的東西做過多台機器的key-value store或者分布式cache。久而久之，我就對所謂的“分布式專家”嗤之以鼻了。

 

前兩天CSDN的頭條是這麼一篇“分布式系統的工程化開發方法
”，原以為又是一個江湖郎中。可瀏覽一遍後，我發現這哥們才算得上是真正做過分布式系統開發的。其實在做分布式系統的時候，痛點不在於data partition，或者是跨機器的協作，真正的痛點在於怎樣處理各種的failure，或者說，怎樣做fault tolerance。 分布式系統有著各種各樣你開發前意想不到的，而且在單機版上不可能碰到的錯誤。而怎樣去檢測這些錯誤，避免這些錯誤，或者是當錯誤來臨時不影響到整個系統的運行，這是分布式系統開發中最有技術含量的地方。

在這篇“分布式系統的工程化開發方法”中，其實貫穿通篇的就是如何處理各種failure（如果將blocking也算作failure的話）。有時間的我比較推薦直接看他的視頻，應該會有不小的收穫。

 

另外，視頻中作者提到的那篇sun公司的paper在這裡： A Note on Distributed Computing
。看過之後你會發現，paper中的觀點正是作者在他的視頻中所表達的。另外，俺看了作者的工作背景後，感歎一句：還是有錢的地方牛人多啊....