mongodb replica set 配置高效能多伺服器詳解_MongoDB

mongodb的多伺服器配置，以前寫過一篇文章，是master-slave模式的，請參考：詳解mongodb 主從配置。master-slave模式，不能自動實現容錯移轉和恢複。所以推薦大家使用mongodb的replica set，來實現多伺服器的高可用。給我的感覺是replica set好像內建了heartbeat功能，挺強大的。

一，三台伺服器，1主，2從

伺服器1：127.0.0.1：27017
伺服器2：127.0.0.1：27018
伺服器3：127.0.0.1：27019

1，建立資料庫目錄

[root@localhost ~]# mkdir /var/lib/{mongodb_2,mongodb_3} 

在一台機子上面類比，三台伺服器，所以把DB目錄分開了。
2，建立設定檔

[root@localhost ~]# cat /etc/mongodb.conf |awk '{if($0 !~ /^$/ && $0 !~ /^#/) {print $0}}' //主伺服器配置 port = 27017  //監聽連接埠 fork = true   //後台運行 pidfilepath = /var/run/mongodb/mongodb.pid //進程PID檔案 logpath = /var/log/mongodb/mongodb.log  //記錄檔 dbpath =/var/lib/mongodb   //db存放目錄 journal = true     //儲存模式 nohttpinterface = true   //禁用http directoryperdb=true    //一個資料庫一個檔案夾 logappend=true     //追加方式寫日誌 replSet=repmore     //叢集名稱，自訂 oplogSize=1000     //oplog大小  [root@localhost ~]# cat /etc/mongodb_2.conf |awk '{if($0 !~ /^$/ && $0 !~ /^#/) {print $0}}' //從伺服器 port = 27018 fork = true pidfilepath = /var/run/mongodb/mongodb_2.pid logpath = /var/log/mongodb/mongodb_2.log dbpath =/var/lib/mongodb_2 journal = true nohttpinterface = true directoryperdb=true logappend=true replSet=repmore oplogSize=1000  [root@localhost ~]# cat /etc/mongodb_3.conf |awk '{if($0 !~ /^$/ && $0 !~ /^#/) {print $0}}' //從伺服器 port = 27019 fork = true pidfilepath = /var/run/mongodb/mongodb_3.pid logpath = /var/log/mongodb/mongodb_3.log dbpath =/var/lib/mongodb_3 journal = true nohttpinterface = true oplogSize = 1000 directoryperdb=true logappend=true replSet=repmore 

在這裡要注意一點，不要把認證開起來了，不然查看rs.status();時，主從伺服器間，無法串連，"lastHeartbeatMessage" : "initial sync couldn't connect to 127.0.0.1:27017"

3，啟動三台伺服器

mongod -f /etc/mongodb.conf mongod -f /etc/mongodb_2.conf mongod -f /etc/mongodb_3.conf 

注意：初次啟動時，主伺服器比較快的，從伺服器有點慢。

二，配置並初始化replica set
1,配置replica set節點

> config = {_id:"repmore",members:[{_id:0,host:'127.0.0.1:27017',priority :2},{_id:1,host:'127.0.0.1:27018',priority:1},{_id:2,host:'127.0.0.1:27019',priority:1}]} 

2，初始化replica set

> rs.initiate(config); {  "info" : "Config now saved locally. Should come online in about a minute.",  "ok" : 1 } 

3，查看replica set各節點狀態

repmore:PRIMARY> rs.status(); {  "set" : "repmore",  "date" : ISODate("2013-12-16T21:01:51Z"),  "myState" : 2,  "syncingTo" : "127.0.0.1:27017",  "members" : [   {    "_id" : 0,    "name" : "127.0.0.1:27017",    "health" : 1,    "state" : 1,    "stateStr" : "PRIMARY",    "uptime" : 33,    "optime" : Timestamp(1387227638, 1),    "optimeDate" : ISODate("2013-12-16T21:00:38Z"),    "lastHeartbeat" : ISODate("2013-12-16T21:01:50Z"),    "lastHeartbeatRecv" : ISODate("2013-12-16T21:01:50Z"),    "pingMs" : 0,    "syncingTo" : "127.0.0.1:27018"   },   {    "_id" : 1,    "name" : "127.0.0.1:27018",    "health" : 1,    "state" : 2,    "stateStr" : "SECONDARY",    "uptime" : 1808,    "optime" : Timestamp(1387227638, 1),    "optimeDate" : ISODate("2013-12-16T21:00:38Z"),    "errmsg" : "syncing to: 127.0.0.1:27017",    "self" : true   },   {    "_id" : 2,    "name" : "127.0.0.1:27019",    "health" : 1,    "state" : 2,    "stateStr" : "SECONDARY",    "uptime" : 1806,    "optime" : Timestamp(1387227638, 1),    "optimeDate" : ISODate("2013-12-16T21:00:38Z"),    "lastHeartbeat" : ISODate("2013-12-16T21:01:50Z"),    "lastHeartbeatRecv" : ISODate("2013-12-16T21:01:51Z"),    "pingMs" : 0,    "lastHeartbeatMessage" : "syncing to: 127.0.0.1:27018",    "syncingTo" : "127.0.0.1:27018"   }  ],  "ok" : 1 } 

在這裡要注意，rs.initiate初始化也是要一定時間的，剛執行完rs.initiate，我就查看狀態，從伺服器的stateStr不是SECONDARY，而是stateStr" : "STARTUP2"，等一會就好了。

三，replica set主，從測試
1，主伺服器測試

repmore:PRIMARY> show dbs; local 1.078125GB repmore:PRIMARY> use test switched to db test repmore:PRIMARY> db.test.insert({'name':'tank','phone':'12345678'}); repmore:PRIMARY> db.test.find(); { "_id" : ObjectId("52af64549d2f9e75bc57cda7"), "name" : "tank", "phone" : "12345678" } 

 
2，從伺服器測試

[root@localhost mongodb]# mongo 127.0.0.1:27018 //串連 MongoDB shell version: 2.4.6 connecting to: 127.0.0.1:27018/test repmore:SECONDARY> show dbs; local 1.078125GB test 0.203125GB repmore:SECONDARY> db.test.find();  //無許可權查看 error: { "$err" : "not master and slaveOk=false", "code" : 13435 } repmore:SECONDARY> rs.slaveOk();  //從庫開啟 repmore:SECONDARY> db.test.find();  //從庫可看到主庫剛插入的資料 { "_id" : ObjectId("52af64549d2f9e75bc57cda7"), "name" : "tank", "phone" : "12345678" } repmore:SECONDARY> db.test.insert({'name':'zhangying','phone':'12345678'}); //從庫唯讀，無插入許可權 not master 

到這兒，我們的replica set就配置好了。

四，故障測試
前面我說過，mongodb replica set有容錯移轉功能，下面就類比一下，這個過程
1，容錯移轉
1.1，關閉主伺服器

[root@localhost mongodb]# ps aux |grep mongod //查看所有的mongod root  16977 0.2 1.1 3153692 44464 ?  Sl 04:31 0:02 mongod -f /etc/mongodb.conf root  17032 0.2 1.1 3128996 43640 ?  Sl 04:31 0:02 mongod -f /etc/mongodb_2.conf root  17092 0.2 0.9 3127976 38324 ?  Sl 04:31 0:02 mongod -f /etc/mongodb_3.conf root  20400 0.0 0.0 103248 860 pts/2 S+ 04:47 0:00 grep mongod [root@localhost mongodb]# kill 16977 //關閉主伺服器進程 [root@localhost mongodb]# ps aux |grep mongod root  17032 0.2 1.1 3133124 43836 ?  Sl 04:31 0:02 mongod -f /etc/mongodb_2.conf root  17092 0.2 0.9 3127976 38404 ?  Sl 04:31 0:02 mongod -f /etc/mongodb_3.conf root  20488 0.0 0.0 103248 860 pts/2 S+ 04:47 0:00 grep mongod 

1.2，在主庫執行命令

repmore:PRIMARY> show dbs; Tue Dec 17 04:48:02.392 DBClientCursor::init call() failed 

1.3，從庫查看狀態，如下圖，

replica set 故障測試
以前的從庫變主庫了，容錯移轉成功

2，故障恢複

mongod -f /etc/mongodb.conf 
啟動剛被關閉的主伺服器，然後在登入到主伺服器，查看狀態rs.status();已恢複到最原始的狀態了。