MySQL最佳化之——叢集搭建步驟詳解，mysql叢集搭建詳解

MySQL最佳化之——叢集搭建步驟詳解，mysql叢集搭建詳解

轉載請註明出處:http://blog.csdn.net/l1028386804/article/details/46833179

1 概述

MySQL Cluster 是MySQL 適合於分散式運算環境的高實用、可拓展、高效能、高冗餘版本，其研發設計的初衷就是要滿足許多行業裡的最嚴酷應用要求，這些應用中經常要求資料庫啟動並執行可靠性要達到99.999%。MySQL Cluster允許在無共用的系統中部署“記憶體中”資料庫叢集，通過無共用體繫結構，系統能夠使用廉價的硬體，而且對軟硬體無特殊要求。此外，由於每個組件有自己的記憶體和磁碟，不存在單點故障。

實際上，MySQL叢集是把一個叫做NDB的記憶體叢集儲存引擎整合與標準的MySQL伺服器整合。它包含一組電腦，每個都跑一個或者多個進程，這可能包括一個MySQL伺服器，一個資料節點，一個管理伺服器和一個專有的一個資料訪問程式。

MySQL Cluster能夠使用多種故障切換和Server Load Balancer選項配置NDB儲存引擎，但在Cluster 層級上的儲存引擎上做這個最簡單。以下為MySQL叢集結構關係圖，

 

MySQL從結構看，由3類節點(電腦或進程)組成，分別是：

管理節點:用於給整個叢集其他節點提供配置、管理、仲裁等功能。理論上通過一台伺服器提供服務就可以了。

資料節點:MySQL Cluster的核心，儲存資料、日誌，提供資料的各種管理服務。2個以上 時就能實現叢集的高可用保證，DB節點增加時，叢集的處理速度會變慢。

SQL節點(API):用於訪問MySQL Cluster資料，提供對外應用服務。增加 API 節點會提高整個叢集的並發訪問速度和整體的輸送量，該節點 可以部署在Web應用伺服器上，也可以部署在專用的伺服器上，也開以和DB部署在 同一台伺服器上。

2 NDB引擎

MySQL Cluster 使用了一個專用的基於記憶體的儲存引擎——NDB引擎，這樣做的好處是速度快， 沒有磁碟I/O的瓶頸，但是由於是基於記憶體的，所以資料庫的規模受系統總記憶體的限制， 如果運行NDB的MySQL伺服器一定要記憶體夠大，比如4G, 8G, 甚至16G。NDB引擎是分布式的，它可以配置在多台伺服器上來實現資料的可靠性和擴充性，理論上 通過配置2台NDB的儲存節點就能實現整個資料庫叢集的冗餘性和解決單點故障問題。

2.1 缺陷

• 基於記憶體，資料庫的規模受叢集總記憶體的大小限制

  基於記憶體，斷電後資料可能會有資料丟失，這點還需要通過測實驗證。

  多個節點通過網路實現通訊和資料同步、查詢等操作，因此整體性受網路速度影響，

  因此速度也比較慢

   

  2.2 優點

  • 多個節點之間可以分布在不同的地理位置，因此也是一個實現分散式資料庫的方案。

    擴充性很好，增加節點即可實現資料庫叢集的擴充。

    冗餘性很好，多個節點上都有完整的資料庫資料，因此任何一個節點宕機都不會造成服務中斷。

    實現高可用性的成本比較低，不象傳統的高可用方案一樣需要共用的存放裝置和專用的軟體才能實現，NDB 只要有足夠的記憶體就能實現。

二、叢集搭建

將搭建一個最簡化的MySQL Cluster系統，配置方法中的所有命令都是以root賬戶運行。這個MySQL Cluster包含一個管理結點、兩個資料結點、兩個SQL結點，這五個結點會分別安裝在五個虛擬機器上，虛擬機器的名稱和IP如下所示：

管理結點	mysql-mgm	192.168.124.141
資料結點 1	mysql-ndbd-1	192.168.124.142
資料結點 2	mysql-ndbd-2	192.168.124.143
SQL 結點1	mysql-sql-1	192.168.124.144
SQL 結點2	mysql-sql-2	192.168.124.145

  

一、公用配置

請在三個虛擬機器上分別配置此處的配置項。

1. 安裝虛擬機器

虛擬機器作業系統安裝CentOS 6.4的x86_64版本，使用NAT網路，並且還要安裝vmware-tools，具體安裝方法此處不詳述。

2. 拷貝mysql cluster

下載以下版本的MySQL-Cluster：

http://cdn.mysql.com/Downloads/MySQL-Cluster-7.3/mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64.tar.gz

下載得到的壓縮包拷貝至虛擬機器的/root/Downloads目錄，然後在shell中運行以下命令：

cd /root/Downloads tar -xvzf mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64.tar.gz mv mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64 /usr/local/mysql

3. 關閉安全性原則

關閉iptables防火牆（或者開啟防火牆的1186、3306連接埠），在Shell中運行以下命令：

chkconfig --level 35 iptables off

關閉SELinux，在Shell中運行以下命令：

gedit /etc/selinux/config

將config檔案中的SELINUX項改為disabled，修改後的config檔案的內容如下：

# This file controls the state of SELinux on the system. # SELINUX= can take one of these three values: #     enforcing - SELinux security policy is enforced. #     permissive - SELinux prints warnings instead of enforcing. #     disabled - No SELinux policy is loaded. SELINUX=disabled # SELINUXTYPE= can take one of these two values: #     targeted - Targeted processes are protected, #     mls - Multi Level Security protection. SELINUXTYPE=targeted

最後重啟系統

二、組態管理結點（192.168.124.141）

1. 配置config.ini設定檔

在shell中運行以下命令：

mkdir /var/lib/mysql-cluster cd /var/lib/mysql-cluster gedit config.ini

設定檔config.ini內容如下：

[ndbd default] NoOfReplicas=2 DataMemory=80M IndexMemory=18M [ndb_mgmd] NodeId=1 hostname=192.168.124.141 datadir=/var/lib/mysql-cluster [ndbd] NodeId=2 hostname=192.168.124.142 datadir=/usr/local/mysql/data [ndbd] NodeId=3 hostname=192.168.124.143 datadir=/usr/local/mysql/data [mysqld] NodeId=4 hostname=192.168.124.144 [mysqld] NodeId=5 hostname=192.168.124.145

2. 安裝管理結點

安裝管理節點，不需要mysqld二進位檔案，只需要MySQL Cluster服務端程式(ndb_mgmd)和監聽用戶端程式(ndb_mgm)。在shell中運行以下命令：

cp /usr/local/mysql/bin/ndb_mgm* /usr/local/bin cd /usr/local/bin chmod +x ndb_mgm*

三、配置資料結點（192.168.124.142、192.168.124.143）

1. 添加mysql組和使用者

在shell中運行以下命令：

groupadd mysql useradd -g mysql mysql

2. 配置my.cnf設定檔

在shell中運行以下命令：

gedit /etc/my.cnf

設定檔my.cnf的內容如下：

[mysqld] basedir=/usr/local/mysql datadir=/usr/local/mysql/data socket=/usr/local/mysql/sock/mysql.sock user=mysql # Disabling symbolic-links is recommended to prevent assorted security risks symbolic-links=0 [mysqld_safe] log-error=/var/log/mysqld.log pid-file=/var/run/mysqld/mysqld.pid [mysql_cluster] ndb-connectstring=192.168.124.141

3. 建立系統資料庫

在shell中運行以下命令：

cd /usr/local/mysql mkdir sock scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data

4. 設定資料目錄

在shell中運行以下命令：

chown -R root . chown -R mysql.mysql /usr/local/mysql/data chown -R mysql.mysql /usr/local/mysql/sock chgrp -R mysql .

5. 配置MySQL服務

在shell中運行以下命令：

cp support-files/mysql.server /etc/rc.d/init.d/ chmod +x /etc/rc.d/init.d/mysql.server chkconfig --add mysql.server

四、配置SQL結點（192.168.124.144、192.168.124.145）

1. 添加mysql組和使用者

在shell中運行以下命令：

groupadd mysql useradd -g mysql mysql

2. 配置my.cnf設定檔

在shell中運行以下命令：

gedit /etc/my.cnf

設定檔my.cnf的內容如下：

[client] socket=/usr/local/mysql/sock/mysql.sock [mysqld] ndbcluster datadir=/usr/local/mysql/data socket=/usr/local/mysql/sock/mysql.sock ndb-connectstring=192.168.124.141 [mysql_cluster] ndb-connectstring=192.168.124.141

3. 建立系統資料庫

在shell中運行以下命令：

cd /usr/local/mysql mkdir sock scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data

4. 設定資料目錄

在shell中運行以下命令：

chown -R root . chown -R mysql.mysql /usr/local/mysql/data chown -R mysql.mysql /usr/local/mysql/sock chgrp -R mysql .

5. 配置MySQL服務

在shell中運行以下命令：

cp support-files/mysql.server /etc/rc.d/init.d/ chmod +x /etc/rc.d/init.d/mysql.server chkconfig --add mysql.server

五、Cluster環境啟動

注意啟動順序：首先是管理節點，然後是資料節點，最後是SQL節點。

1. 啟動管理結點

在shell中運行以下命令：

ndb_mgmd -f /var/lib/mysql-cluster/config.ini

還可以使用ndb_mgm來監聽用戶端，如下：

ndb_mgm

2. 啟動資料結點

初次開機，則需要添加--initial參數，以便進行NDB節點的初始化工作。在以後的啟動過程中，則是不能添加該參數的，否則ndbd程式會清除在之前建立的所有用於恢複的資料檔案和記錄檔。

/usr/local/mysql/bin/ndbd --initial

如果不是初次開機，則執行下面的命令。

/usr/local/mysql/bin/ndbd

3. 啟動SQL結點

若MySQL服務沒有運行，則在shell中運行以下命令：

/usr/local/mysql/bin/mysqld_safe --user=mysql &

4. 啟動測試

查看管理節點，啟動成功：

六、叢集測試

1. 測試一

現在我們在其中一個SQL結點上進行相關資料庫的建立,然後到另外一個SQL結點上看看資料是否同步。

在SQL結點1（192.168.124.144）上執行：

shell> /usr/local/mysql/bin/mysql -u root -p mysql>show databases; mysql>create database aa; mysql>use aa; mysql>CREATE TABLE ctest2 (i INT) ENGINE=NDB; //這裡必須指定資料庫表的引擎為NDB,否則同步失敗 mysql> INSERT INTO ctest2 () VALUES (1); mysql> SELECT * FROM ctest2;

然後在SQL結點2上看資料是否同步過來了

經過測試，在非master上建立資料，可以同步到master上

查看錶的引擎是不是NDB，>show create table 表名；

2. 測試二

關閉一個資料節點 ，在另外一個節點寫輸入，開啟關閉的節點，看資料是否同步過來。

首先把資料結點1重啟，然後在結點2上添加資料

在SQL結點2(192.168.124.145)上操作如下：

mysql> create database bb; mysql> use bb; mysql> CREATE TABLE ctest3 (i INT) ENGINE=NDB; mysql> use aa; mysql> INSERT INTO ctest2 () VALUES (3333); mysql> SELECT * FROM ctest2;

等資料結點1啟動完畢，啟動資料結點1的服務

#/usr/local/mysql/bin/ndbd --initial#service mysqld start

然後登入進去查看資料

# /usr/local/mysql/bin/mysql -u root –p

可以看到資料已經同步過來了，說明資料可以雙向同步了。

七、關閉叢集

1. 關閉管理節點和資料節點，只需要在管理節點（ClusterMgm--134）裡執行：

shell> /usr/local/mysql/bin/ndb_mgm -e shutdown

顯示

Connected to Management Server at: localhost:1186 2 NDB Cluster node(s) have shutdown. Disconnecting to allow management server to shutdown.

2. 然後關閉Sql節點（135,136），分別在2個節點裡運行：

shell> /etc/init.d/mysql.server stop Shutting down MySQL... SUCCESS!

注意：要再次啟動叢集，就按照第五部分的啟動步驟即可，不過這次啟動資料節點的時候就不要加”-initial”參數了。

著作權聲明：本文為博主原創文章，未經博主允許不得轉載。