centos下mysql叢集配置例子

安裝要求
安裝環境：CentOS-6.3
安裝方式：源碼編譯安裝
軟體名稱：mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz
下載地址：http://mysql.mirror.kangaroot.net/Downloads/
軟體安裝位置：/usr/local/mysql
資料存放位置：/var/mysql/data
日誌存放位置：/var/mysql/logs

叢集設計
首先設計叢集的安裝分配方式，我共需要5台伺服器，伺服器分配如下：
管理節點：    192.168.15.231
sql節點1：   192.168.15.232
sql節點2：   192.168.15.233
資料節點1：  192.168.15.234
資料節點2：  192.168.15.235
裝置的串連方式如下圖所示：

注意：目前這種設計存在的問題是管理節點是單點的，231掛掉後整個叢集就會癱瘓，先不管這個問題，首先把這個簡單的MySQL叢集先搭建起來。

檢查安裝的mysql
檢查系統中已經安裝過的mysql資訊，操作如下：

[root@localhost /]# rpm -qa | grep mysql
[root@localhost /]# service mysql status
如果安裝過其他版本的mysql，請卸載，操作如下：

[root@localhost /]# /etc/init.d/mysqld    stop  //關閉目前的mysql服務
[root@localhost /]# ps    -ef | grep mysql  //檢驗mysql是否已經關閉
#如果沒關閉，執行kill -9 連接埠號碼
#執行刪除
rpm -e --allmatches    --nodeps mysql mysql-server
rm -rf /var/lib/mysql  // 刪除mysql的安裝目錄管理節點
管理節點安裝
安裝管理節點（192.168.15.231）

[root@localhost /]#    groupadd mysql
[root@localhost /]#  useradd mysql -g mysql
[root@localhost /]# cd    /usr/local
[root@localhost local]#    tar -zxv -f mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz
[root@localhost local]#    mv mysql-cluster-gpl-7.2.6-linux2.6-x86_64 mysql
[root@localhost local]#    chown -R mysql:mysql mysql
[root@localhost local]#    cd mysql
[root@localhost mysql]#    scripts/mysql_install_db --user=mysql
管理節點配置
[root@localhost ~]#  mkdir /var/lib/mysql-cluster
[root@localhost ~]# cd    /var/lib/mysql-cluster
[root@localhost mysql-cluster]#    vi + /var/lib/mysql-cluster/config.ini在config.ini 中添加以下內容:

[NDBD DEFAULT]
NoOfReplicas=1
[TCP DEFAULT]
portnumber=3306
[NDB_MGMD]
#設定管理節點伺服器
HostName=192.168.15.231
DataDir=/var/mysql/data
[NDBD]
#設定儲存節點伺服器(NDB節點)
HostName=192.168.15.234
DataDir=/var/mysql/data
[NDBD]
#第二個NDB節點
HostName=192.168.15.235
DataDir=/var/mysql/data
[MYSQLD]
#設定SQL節點伺服器
HostName=192.168.15.232
[MYSQLD]
#第二個SQL節點
HostName=192.168.15.233管理節點啟動
[root@localhost ~]#/usr/local/mysql/bin/ndb_mgmd -f /var/lib/mysql-cluster/config.ini
[root@localhost ~]# mkdir  /var/mysql/logs
[root@localhost ~]# netstat -lntpu看到tcp 0 0 0.0.0.0:1186開放說明啟動正常
開啟管理節點伺服器的1186連接埠

管理節點檢驗
執行以下操作：

[root@localhost /]# ndb_mgm     // 管理節點
-- NDB Cluster -- Management Client --
ndb_mgm> show
Connected to Management Server at:    localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)]        2 node(s)
id=2 (not connected, accepting connect from    192.168.15.234)
id=3 (not connected, accepting connect from    192.168.15.235)

[ndb_mgmd(MGM)] 1 node(s)
id=1       @192.168.15.231  (mysql-5.5.22    ndb-7.2.6)

[mysqld(API)]      2 node(s)
id=4 (not connected, accepting connect from    192.168.15.232)
id=5 (not connected, accepting connect from    192.168.15.233)
管理節點關閉
[root@localhost /]#    /usr/local/mysql/bin/ndb_mgm -e shutdown
#成功後終端列印出以下資訊
Connected to Management    Server at: 192.168.15.236:1186
3 NDB Cluster node(s)    have shutdown.
Disconnecting to allow    management server to shutdown.
資料節點
資料節點安裝
資料節點1： 192.168.15.234
資料節點2： 192.168.15.235

[root@localhost /]#    groupadd mysql
[root@localhost /]#    useradd mysql -g mysql
[root@localhost /]# cd    /usr/local
[root@localhost local]#    tar -zxv -f mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz
[root@localhost local]#    mv mysql-cluster-gpl-7.2.6-linux2.6-x86_64 mysql
[root@localhost local]#    chown -R mysql:mysql mysql
[root@localhost local]#    cd mysql
[root@localhost mysql]#    scripts/mysql_install_db --user=mysql
[root@localhost mysql]#    cp support-files/my-medium.cnf /etc/my.cnf
[root@localhost mysql]#    cp support-files/mysql.server /etc/init.d/mysqld資料節點配置
對資料節點進行配置，執行以下操作：

[root@localhost mysql]#    mkdir /var/mysql/data
[root@localhost mysql]#    mkdir /var/mysql/logs
[root@localhost mysql]#    vi /etc/my.cnf
向檔案追加以下內容：

[MYSQLD]
ndbcluster
ndb-connectstring=192.168.15.231
[MYSQL_CLUSTER]
ndb-connectstring=192.168.15.231
[NDB_MGM]
connect-string=192.168.15.231
資料節點啟動
啟動此處時，管理節點伺服器防火牆必須開啟1186,3306連接埠。
注意：只是在第一次啟動或在備份／恢複或配置變化後重啟ndbd時，才加–initial參數！
第一次啟動如下：

[root@localhost mysql]#/usr/local/mysql/bin/ndbd --initial
2013-01-30 13:43:53    [ndbd] INFO     -- Angel connected to    '192.168.15.231:1186'
2013-01-30 13:43:53    [ndbd] INFO     -- Angel allocated    nodeid: 2正常啟動方式：

[root@localhost mysql]# /usr/local/mysql/bin/ndbd資料節點關閉
[root@localhost /]# /etc/rc.d/init.d/mysqld stop或者
[root@localhost mysql]# /etc/init.d/mysql stop
Shutting down MySQL.. SUCCESS!
 /usr/local/mysql/bin/mysqladmin -uroot shutdownSQL節點安裝
SQL節點安裝
SQL節點和儲存節點(NDB節點)安裝相同，都執行以下操作；
sql節點1： 192.168.15.232
sql節點2： 192.168.15.233

[root@localhost /]#    groupadd mysql
[root@localhost /]#    useradd mysql -g mysql
[root@localhost /]# cd    /usr/local
[root@localhost local]#    tar -zxv -f mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz
[root@localhost local]#    mv mysql-cluster-gpl-7.2.6-linux2.6-x86_64 mysql
[root@localhost local]# chown    -R mysql:mysql mysql
[root@localhost local]#    cd mysql
[root@localhost mysql]#    scripts/mysql_install_db --user=mysql
[root@localhost mysql]#    cp support-files/my-medium.cnf /etc/my.cnf
[root@localhost mysql]#    cp support-files/mysql.server /etc/init.d/mysqldSQL節點配置
執行以下操作：

[root@localhost mysql]#    mkdir /var/mysql/data     //建立儲存資料的檔案夾
[root@localhost mysql]#    mkdir /var/mysql/logs     //建立儲存日誌的檔案夾
[root@localhost mysql]#    vi /usr/local/mysql/my.cnf  //修改設定檔追加以下內容：

[MYSQLD]
ndbcluster
ndb-connectstring=192.168.15.231
[MYSQL_CLUSTER]
ndb-connectstring=192.168.15.231
[NDB_MGM]
connect-string=192.168.15.231SQL節點啟動
執行以下操作：

[root@localhost    mysql]# service mysqld start
Starting    MySQL.. SUCCESS!SQL節點關閉
最直接的方式：

[root@localhost mysql]# /usr/local/mysql/bin/mysqladmin    -uroot shutdown[root@localhost /]# /etc/rc.d/init.d/mysqld stop或者
[root@localhost mysql]# /etc/init.d/mysql stop
Shutting down MySQL.. SUCCESS!功能測試
在管理節點（192.168.15.231）上查看服務狀態

[root@localhost ~]#    /usr/local/mysql/bin/ndb_mgm

-- NDB Cluster -- Management Client --
ndb_mgm> show
Cluster Configuration
---------------------
[ndbd(NDB)]        2 node(s)
id=2       @192.168.15.234  (mysql-5.5.22    ndb-7.2.6, Nodegroup: 0, Master)
id=3       @192.168.15.235  (mysql-5.5.22    ndb-7.2.6, Nodegroup: 1)

[ndb_mgmd(MGM)] 1 node(s)
id=1       @192.168.15.231  (mysql-5.5.22    ndb-7.2.6)

[mysqld(API)]      2 node(s)
id=4       @192.168.15.232  (mysql-5.5.22    ndb-7.2.6)
id=5       @192.168.15.233  (mysql-5.5.22    ndb-7.2.6)可以看到這裡的資料節點、管理節點、sql節點都是正常的。
注意：

1.在建表的時候一定要用ENGINE=NDB或ENGINE=NDBCLUSTER指定使用NDB叢集儲存引擎，或用ALTER TABLE選項更改表的儲存引擎。
2.NDB表必須有一個主鍵，因此建立表的時候必須定義主鍵，否則NDB儲存引擎將自動產生隱含的主鍵。
3.Sql節點的使用者權限表仍然採用MYISAM儲存引擎儲存的，所以在一個Sql節點建立的MySql使用者只能訪問這個節點，如果要用同樣的使用者訪問別的Sql節點，需要在對應的Sql節點追加使用者。雖然在MySql Cluster7.2版本開始提供了”使用者權限共用”。
資料同步性測試
在一個資料節點上進行相關資料庫的建立，然後到另外一個資料節點上看看資料是否同步。

第1步：
SQL節點1（192.168.15.232）上增加資料：

[root@localhost    mysql]#  /etc/rc.d/init.d/mysqld status                //檢驗mysql是否運行
[root@localhost mysql]#    /etc/rc.d/init.d/mysqld start                   //啟動mysql
[root@localhost mysql]#    /usr/local/mysql/bin/mysql -u root -p
Enter password:
mysql> show databases;
mysql> create database    testdb2;
mysql> use testdb2;
mysql> CREATE TABLE    td_test2 (i INT) ENGINE=NDB;
//這裡必須指定資料庫表的引擎為NDBCLUSTER，與設定檔中的名稱相同
mysql> INSERT INTO    td_test2() VALUES (1);
mysql> INSERT INTO    td_test2() VALUES (152);
mysql> SELECT * FROM    td_test2;第2步：
進入到SQL節點2（192.168.15.233）上查看資料

mysql> use testdb2;
Database changed
mysql> SELECT * FROM td_test2;
+------+
| i    |
+------+
|  126 |
|    1 |
+------+
2 rows in set (0.01 sec)查看錶的引擎是不是NDB：

>show create table td_test2;第3步：
反向測試，SQL節點2（192.168.15.233）上增加資料：

mysql> create database    bb;
mysql> use bb;
mysql> CREATE TABLE    td_test3 (i INT) ENGINE=NDB;
mysql> INSERT INTO    td_test3 () VALUES (98);
mysql> SELECT * FROM    td_test3;SQL節點1（192.168.15.232）上查看資料：

mysql>  use bb;
Database changed
mysql>  SELECT * FROM td_test3;
+------+
| i    |
+------+
|   98 |
+------+
1 row in set (0.00 sec)關閉叢集
先關閉管理節點，然後關閉SQL節點和資料節點。

叢集啟動操作順序
要再次啟動叢集，按照以下順序執行：
管理節點 -> 資料節點 –> SQL節點注意：此次啟動資料節點時不要加”–initial”參數。 

安裝及測試中的錯誤
啟動中的錯誤
錯誤提示：
Can't connect to local MySQL server through socket '/tmp/mysql.sock' (2)
解決辦法1（連接埠佔用） netstat -anp |grep 3306
kill -9 進程號
解決辦法1（許可權問題） [root@localhost mysql]# chown -R mysql:mysql /var/mysql          //修改自訂檔案夾的存取權限

 

 

 

 

 

 

三台伺服器篇

一、介紹

========
這篇文檔旨在介紹如何安裝配置基於2台伺服器的MySQL叢集。並且實現任意一台伺服器出現問題或宕機時MySQL依然能夠繼續運行。

注意！
雖然這是基於2台伺服器的MySQL叢集，但也必須有額外的第三台伺服器作為管理節點，但這台伺服器可以在叢集啟動完成後關閉。同時需要注意的是 並不推薦在叢集啟動完成後關閉作為管理節點的伺服器。儘管理論上可以建立基於只有2台伺服器的MySQL叢集，但是這樣的架構，一旦一台伺服器宕機之後集 群就無法繼續正常工作了，這樣也就失去了叢集的意義了。出於這個原因，就需要有第三台伺服器作為管理節點運行。

另外，可能很多朋友都沒有3台伺服器的實際環境，可以考慮在VMWare或其他虛擬機器中進行實驗。

下面假設這3台服務的情況： 
Server1: mysql1.vmtest.net 192.168.0.1
Server2: mysql2.vmtest.net 192.168.0.2
Server3: mysql3.vmtest.net 192.168.0.3 Servers1 和Server2作為實際配置MySQL叢集的伺服器。對於作為管理節點的Server3則要求較低，只需對Server3的系 統進行很小的調整並且無需安裝MySQL，Server3可以使用一台配置較低的電腦並且可以在Server3同時運行其他服務。

二、在Server1和Server2上安裝MySQL
=================================
從http://www.mysql.com上下載mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz
注意：必須是max版本的MySQL，Standard版本不支援叢集部署！

以下步驟需要在Server1和Server2上各做一次
# mv mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz /usr/local/
# cd /usr/local/
# groupadd mysql
# useradd -g mysql mysql
# tar -zxvf mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz
# rm -f mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz
# mv mysql-max-4.1.9-pc-linux-gnu-i686 mysql
# cd mysql
# scripts/mysql_install_db --user=mysql
# chown -R root  .
# chown -R mysql data
# chgrp -R mysql .
# cp support-files/mysql.server /etc/rc.d/init.d/mysqld
# chmod +x /etc/rc.d/init.d/mysqld
# chkconfig --add mysqld 此時不要啟動MySQL！

 

三、安裝並組態管理節點伺服器(Server3)  www.111cn.Net
=====================================
作為管理節點伺服器，Server3需要ndb_mgm和ndb_mgmd兩個檔案：

從http://www.mysql.com上下載mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz

# mkdir /usr/src/mysql-mgm
# cd /usr/src/mysql-mgm
# tar -zxvf mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz
# rm mysql-max-4.1.9-pc-linux-gnu-i686.tar.gz
# cd mysql-max-4.1.9-pc-linux-gnu-i686
# mv bin/ndb_mgm .
# mv bin/ndb_mgmd .
# chmod +x ndb_mg*
# mv ndb_mg* /usr/bin/
# cd
# rm -rf /usr/src/mysql-mgm現在開始為這台管理節點伺服器建立設定檔：

# mkdir /var/lib/mysql-cluster
# cd /var/lib/mysql-cluster
# vi config.ini
在config.ini中添加如下內容：

[NDBD DEFAULT]
NoOfReplicas=2
[MYSQLD DEFAULT]
[NDB_MGMD DEFAULT]
[TCP DEFAULT]
# Managment Server
[NDB_MGMD]
HostName=192.168.0.3 #管理節點伺服器Server3的IP地址
# Storage Engines
[NDBD]
HostName=192.168.0.1 #MySQL叢集Server1的IP地址
DataDir= /var/lib/mysql-cluster
[NDBD]
HostName=192.168.0.2 #MySQL叢集Server2的IP地址
DataDir=/var/lib/mysql-cluster
# 以下2個[MYSQLD]可以填寫Server1和Server2的主機名稱。
# 但為了能夠更快的更換叢集中的伺服器，推薦留空，否則更換伺服器後必須對這個配置變更。
[MYSQLD]
[MYSQLD]
儲存退出後，啟動管理節點伺服器Server3：
# ndb_mgmd

啟動管理節點後應該注意，這隻是管理節點服務，並不是管理終端。因而你看不到任何關於啟動後的輸出資訊。

 

四、配置叢集伺服器並啟動MySQL
=============================
在Server1和Server2中都需要進行如下改動：

# vi /etc/my.cnf
[mysqld]
ndbcluster
ndb-connectstring=192.168.0.3 #Server3的IP地址
[mysql_cluster]
ndb-connectstring=192.168.0.3 #Server3的IP地址
儲存退出後，建立資料目錄並啟動MySQL：

# mkdir /var/lib/mysql-cluster
# cd /var/lib/mysql-cluster
# /usr/local/mysql/bin/ndbd --initial
# /etc/rc.d/init.d/mysqld start
可以把/usr/local/mysql/bin/ndbd加到/etc/rc.local中實現開機啟動。
注意：只有在第一次啟動ndbd時或者對Server3的config.ini進行改動後才需要使用--initial參數！

五、檢查工作狀態
================
回到管理節點伺服器Server3上，並啟動管理終端：

# /usr/bin/ndb_mgm
鍵入show命令查看當前工作狀態：（下面是一個狀態輸出樣本）

[root@mysql3 root]# /usr/bin/ndb_mgm
-- NDB Cluster -- Management Client --
ndb_mgm> show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)]     2 node(s)
id=2    @192.168.0.1  (Version: 4.1.9, Nodegroup: 0, Master)
id=3    @192.168.0.2  (Version: 4.1.9, Nodegroup: 0)
[ndb_mgmd(MGM)] 1 node(s)
id=1    @192.168.0.3  (Version: 4.1.9)

[mysqld(API)]   2 node(s)
id=4   (Version: 4.1.9)
id=5   (Version: 4.1.9)

ndb_mgm>
如果上面沒有問題，現在開始測試MySQL：
注意，這篇文檔對於MySQL並沒有設定root密碼，推薦你自己設定Server1和Server2的MySQL root密碼。

在Server1中： www.111Cn.net

# /usr/local/mysql/bin/mysql -u root -p
> use test;
> CREATE TABLE ctest (i INT) ENGINE=NDBCLUSTER;
> INSERT INTO ctest () VALUES (1);
> SELECT * FROM ctest;
應該可以看到1 row returned資訊（返回數值1）。

如果上述正常，則換到Server2上重複上面的測試，觀察效果。如果成功，則在Server2中執行INSERT再換回到Server1觀察是否工作正常。
如果都沒有問題，那麼恭喜成功！

六、破壞性測試
==============
將Server1或Server2的網線拔掉，觀察另外一台叢集伺服器工作是否正常（可以使用SELECT查詢測試）。測試完畢後，重新插入網線即可。

如果你接觸不到物理伺服器，也就是說不能拔掉網線，那也可以這樣測試：
在Server1或Server2上：

# ps aux | grep ndbd
將會看到所有ndbd進程資訊：

root      5578  0.0  0.3  6220 1964 ?        S    03:14   0:00 ndbd
root      5579  0.0 20.4 492072 102828 ?     R    03:14   0:04 ndbd
root     23532  0.0  0.1  3680  684 pts/1    S    07:59   0:00 grep ndbd

然後殺掉一個ndbd進程以達到破壞MySQL叢集伺服器的目的：

# kill -9 5578 5579

之後在另一台叢集伺服器上使用SELECT查詢測試。並且在管理節點伺服器的管理終端中執行show命令會看到被破壞的那台伺服器的狀態。
測試完成後，只需要重新啟動被破壞伺服器的ndbd進程即可：

# ndbd
注意！前面說過了，此時是不用加--inital參數的！

至此，MySQL叢集就配置完成了！