分散式運算的體驗1

這個星期的事情太多，現在終於有時間坐下來理一下。

在幾個星期之前，我負責設計開發的那個系統開始測試，公司專門派一個人負責錄入測試資料。由於這個系統太大，資料涉及全國幾乎所有的區縣，所以光靠一個人來錄入資料是不可能的。所以，在他錄入了3天之後，我決定專門寫幾個預存程序，來複製資料。一天下來，把全國幾乎所有的縣的資料都錄上了。但是當我再運行系統的時候，發現系統啟動並執行速度奇慢無比，完全無法讓人接受。我不知道這個對我來說是禍還是福，但至少這個實事給了我從新思考這個系統結構的機會！我一直都想讓自己具備系統分析師的能力，也在不斷地學習，這件事也讓我看到自己離系統分析師這個角色還有一段距離。

這個系統從使用者的需求角度由縣級用戶端、市級用戶端、省級用戶端和部級用戶端構成；從系統資料處理的角度由用戶端、應用伺服器和資料庫伺服器構成。就資料處理流程，我設計了一個構架，這個構架將資料表示、資料轉換、資料網路傳輸、資料存放區有機的結合起來，它基於.Net，在這個構架設計實施完成之後，整個系統開發的速度變得很快，基本上能夠消化掉使用者需求的調整，可以說是一路凱歌。但是當整個系統面對大資料的處理時，問題出來了。這個問題如果不能夠很好解決，那麼這個構架就得作廢。