教你手工mysql拆庫

標籤：style   blog   http   color   使用   os   

      互連網網站應用程式大多採用mysql作為DB儲存，限於mysql單機效能的瓶頸，為了支撐更大容量和更大的訪問量，dba一般通過建立分布式叢集，讓多個mysql共同提供服務。所謂的mysql分布式叢集，實質就是將原有的資料拆成多份，放在多個mysql資料庫上儲存，應用通過中介層路由到對應的資料庫分區，訪問所需要資料，基本架構1所示。這裡的關鍵點就是“拆”，如何拆庫，根據業務情境，一般可以採取水平分割和垂直分割。所謂水平分割是指，將一個大表按一定的規則分區，分布在多個mysql資料庫中；垂直分割則是指根據業務模組劃分，將不同模組分布在不同的mysql資料庫中。無論是水平分割，還是垂直分割，對於底層營運人員來說，遷移擴容的本質是一樣的。本文會結合一個具體的例子，詳細講解mysql拆庫的具體步驟。

前提：mysq叢集部署採用MM架構，Master與Slave採用雙向複製，Master對外提供服務，Slave作為熱備。

假設：執行個體上有庫A和庫B，目前受限於單機mysql的效能瓶頸，需要擴容。

目的：將庫B拆出來，使得庫A和庫B分別單獨佔用物理機，2所示

實施步驟：

1.搭建備庫

Mysql搭建備庫主要有兩種方式，邏輯備份(mysqldump)或物理備份(extrabackup)。由於我們需要將其中一個庫拆出來，選擇mysqldump會比較合適。

mysqldump -uxxx -pxxx –h ip_addr  -P port --databases B mysql --master-data=2 --single-transaction --default-character-set=xxx > /u01/bak/B_dump.sql 2>/u01/bak/B_dump.log &

說明：

1)   參數

--master-data=2，--single-transaction這兩個參數一起使用，全域讀鎖只會在dump開始的時候加一小段時間，通過設定repeatable read隔離等級，保證讀取事務開始時的資料，擷取一致性資料，並且在備份檔案開頭處顯示位點(File,Position)。

2)   為什麼要備份mysql庫

這裡是因為資料庫的中繼資料資訊都儲存在mysql中，比如表定義，使用者資訊等，因此需要一起備份過去。

2.檢查備份是否成功

查看/u01/bak/B_dump.sql的結尾是否有dump complete 查看/u01/bak/B_dump.log檔案是否異常輸出

3.匯入備份到新機器

Mysql –uroot</u01/bak/B_dump.sql>B_import.log 2>&1 &

 4.匯入增量

1)   由於老庫上面有A，B兩個庫，新庫只有B庫，通過複製擷取增量時，必然會導致報錯，因此在匯入前需要對新庫設定複製過濾參數，replicate-do-db

replicate-do-db=mysql replicate-do-db=B

2)   新庫與老庫建立複製關係，這裡需要用到步驟1擷取的位點資訊(File,Position)

CHANGE master TO master_host=xxx, master_port=xxx,master_user=‘slave‘,master_password=‘slave‘, master_log_file=File,master_log_pos=Position;

5. 等待新庫與老庫同步，至此新庫與老庫複製結構如

6. 切換

1)   將New M設定為可寫狀態，並將Old M與New M構成雙M架構

備忘：紅色代表本次操作的複製變動

2)   通知應用將B庫流量切換到New Master，由於這裡設定到中介軟體的細節，不同公司採用的中介軟體不一樣，這裡不作說明

3)   B庫流量全部切換到New Master 後，檢查Old Master是否還有B庫流量訪問，確定沒有，調整複製結構

備忘：檢查是否還有流量，可以通過show processlist看看是否還有串連來驗證。

7.切換完畢，斷開New Master 和Old Master的複製

8.善後

清理Old Master的B庫資料，釋放磁碟空間。