Mysql分庫分表方案

標籤：

Mysql分庫分表方案

1.為什麼要分表：

當一張表的資料達到幾千萬時，你查詢一次所花的時間會變多，如果有聯集查詢的話，我想有可能會死在那兒了。分表的目的就在於此，減小資料庫的負擔，縮短查詢時間。

mysql中有一種機制是表鎖定和行鎖定，是為了保證資料的完整性。表鎖定表示你們都不能對這張表進行操作，必須等我對錶操作完才行。行鎖定也一樣，別的sql必須等我對這條資料操作完了，才能對這條資料進行操作。

2. mysql proxy：amoeba

做mysql叢集,利用amoeba。

從上層的java程式來講，不需要知道主伺服器和從伺服器的來源，即主從資料庫伺服器對於上層來講是透明的。可以通過amoeba來配置。

 3.大資料量並且訪問頻繁的表，將其分為若干個表

比如對於某網站平台的資料庫表-公司表，資料量很大，這種能預估出來的大資料量表，我們就事先分出個N個表，這個N是多少，根據實際情況而定。

     某網站現在的資料量至多是5000萬條，可以設計每張表容納的資料量是500萬條，也就是拆分成10張表，

那麼如何判斷某張表的資料是否容量已滿呢？可以在程式段對於要新增資料的表，在插入前先做統計表記錄數量的操作，當<500萬條資料，就直接插入，當已經到達閥值，可以在程式段新建立資料庫表（或者已經事先建立好），再執行插入操作。

 4. 利用merge儲存引擎來實現分表

如果要把已有的大資料量表分開比較痛苦，最痛苦的事就是改代碼，因為程式裡面的sql語句已經寫好了。用merge儲存引擎來實現分表, 這種方法比較適合.

舉例子：

 

 ------------------- ----------華麗的分割線--------------------------------------

 資料庫結構描述

1、簡單的MySQL主從複製:

MySQL的主從複製解決了資料庫的讀寫分離，並很好的提升了讀的效能，其圖如下：

 

其主從複製的過程如所示：

 

但是，主從複製也帶來其他一系列效能瓶頸問題：

1. 寫入無法擴充

2. 寫入無法緩衝

3. 複製延時

4. 鎖表率上升

5. 表變大，緩衝率下降

那問題產生總得解決的，這就產生下面的最佳化方案，一起來看看。

2、MySQL垂直資料分割

   如果把業務切割得足夠獨立，那把不同業務的資料放到不同的資料庫伺服器將是一個不錯的方案，而且萬一其中一個業務崩潰了也不會影響其他業務的正常進行，並且也起到了負載分流的作用，大大提升了資料庫的吞吐能力。經過垂直資料分割後的資料庫結構描述圖如下：

 

然而，儘管業務之間已經足夠獨立了，但是有些業務之間或多或少總會有點聯絡，如使用者，基本上都會和每個業務相關聯，況且這種分區方式，也不能解決單張表資料量暴漲的問題，因此為何不試試水平分割呢？

3、MySQL水平分區（Sharding）

這是一個非常好的思路，將使用者按一定規則（按id雜湊）分組，並把該組使用者的資料存放區到一個資料庫分區中，即一個sharding，這樣隨著使用者數量的增加，只要簡單地配置一台伺服器即可，原理圖如下：

 

如何來確定某個使用者所在的shard呢，可以建一張使用者和shard對應的資料表，每次請求先從這張表找使用者的shard id，再從對應shard中查詢相關資料，如所示：

 

Mysql分庫分表方案