)大型互連網網站架構心得之二:並、換和其它

來源:互聯網
上載者:User

 

大型互連網網站架構心得之二:並、換和其它

首先,聲明一下,這是一篇從高人lovecherry博主那裡轉過來的,和大家分享一下,也給自己一個學習機會。

 

 

上次說的“分”是一個比較大的原則也是一個比較高層的原則,這次我想說一下其它兩個原則:並與換。

 

 

為什麼要分?是因為我們希望通過分來提高系統的承載能力,那並又是並什麼呢?我想了一下有幾個方面可以並:

 

1.       合并使用者請求,最基本的就是合并CSS/圖片/指令碼,還可以合并頁面。不過合并就可能產生流量的浪費,需要有一個平衡點。

2.       合并介面的粒度,如果做分布式應用的話,我們可能不會直接存取資料庫而是調用應用程式層提供的介面,由於是網路調用,代價比較大,因此在設計的時候盡量提供粒度比較粗的介面,一次調用返回比較多的資料,而不是細化到添加刪除修改的層次。

3.       合并介面的部署,對於頻繁的跨機器調用可以考慮有一些資料冗餘,把跨網路的服務編程進程間通訊,甚至轉到用戶端來做。比如論壇發貼時候髒詞的過濾,直接調用應用程式層提供的介面(跨機器)是可以的,但是可能代價比較大,可以把這個介面使用IPC方式部署在本機。

 

 

時間換空間,空間換時間是常見的做法,具體一點說:

 

1.       緩衝。緩衝的重要性早電腦的硬體中就有重要的體現。對於網站,有很多種緩衝,可以是用戶端資源的緩衝,可以是網頁輸出快取,也可以是應用程式層的資料緩衝,目的都是一樣的,或是減少了伺服器請求次數,或是減少了請求的處理過程,或是減少了資料庫的訪問次數。當然,產生靜態檔案也可以算是一種緩衝。不訪問磁碟固然不可能,但是我們要極大限度降低磁碟訪問的機會。

2.       有的時候為了擷取極快的響應,我們還會不惜代價採用重複計算。比如,我們的某個操作很可能會由於網路問題等原因響應比較慢,在設計的時候可以有一個統一的處理介面,由這個介面分發到不同的伺服器去非同步實現這個操作,哪個伺服器先返回了結果我們就用這個結果,然後殺死其他伺服器的冗餘操作。

3.       網站一般追求比較快的響應,一般不太會在比較高的層次用時間來換取空間,但是在一些使用者專屬資料的處理演算法上可能還是會考慮到空間的節省問題。

4.       有的時候我們會用一些彙總表來存放彙總資料,也就是進行一些預計算提高複雜計算(比如報表)的效能。當然,對於資料分析,構建多維資料庫也是一種不錯的選擇。

 

有很多網友留言說說的比較粗,沒有什麼具體的東西。我覺得架構這個東西很難去說具體怎麼做,因為具體實施的時候要看情況去應用的,由於沒有完美的東西,所以做架構通常是去做一個平衡,很可能某一個側重不同會影響到架構的實施。希望我的這些文章能給大家一個提示的作用,看了之後如果你覺得“這點我倒沒有考慮到,以後要注意”那或許就是最大的協助了,下面我想說一些其它方面的問題,每一條都很零散,算是一個補充吧:

 

1.       到底是採用已有的東西還是自己去做需要詳細考慮的,採用別人的東西可能比較穩定,但是自己的控制少了一點,採用自己做的東西可以很靈活,但是可能會問題比較多。不管怎麼樣,我們在採用一個第三方架構的時候務必要進行縝密的調查,看到他的不足,否則項目很可能在後期被這個架構制約,反之,決定自己去做一個架構的時候也要看到自己需要什麼其他架構不能提供的東西。

2.       資料轉送的時候可以做壓縮,但要考慮到壓縮解壓縮需要CPU資源,在IO(磁碟,頻寬,傳輸能力)和CPU之間有一個平衡的考慮。

3.       理想的延展性架構是可以自由增加或替換伺服器,無需去停機維護或做很大的調整。在使用一個統一的調度中心來調度這些伺服器,分配請求的時候,我們要考慮一下調度伺服器能承受多少流量。

4.       使用大量的廉價伺服器還是少量的高配伺服器?如何根據需求來組合伺服器發揮最大作用。

5.       對於分布式構架,我們盡量讓每一個節點保持簡單的邏輯,盡量減少同一層次節點之間的依賴,另外。需要有統一的地方來管理所有的節點。

6.       功能分解、使用非同步進行整合、容錯移轉、失效保護。

7.       軟體的架構升級和電腦硬體的架構升級很像,可能有一段時期,我們是在慢慢提高整體能力,2年也才提高了幾倍,之後發現只有通過某種徹底的架構改變才能提高數十倍的能力,升級之後,我們或許又會遇到其他問題。就像CPU,是簡單提高主頻還是徹底更換架構。

8.       資料方面,讀寫分離、資料庫分隔、功能劃分、緩衝、鏡像。

9.       硬體網路上的架構很重要,但軟體開發中的一些細節不可忽略,好的架構不意味著不需要代碼審閱。

 

寫的有點亂,請大家討論。

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.