原創:100 台規模叢集儲存系統搭建及資料即時備份,叢集即時

來源:互聯網
上載者:User

原創:100 台規模叢集儲存系統搭建及資料即時備份,叢集即時

伺服器說明 外網 IP(NAT) 內網 IP(NAT) 主機名稱
apache 網頁伺服器 10.0.0.7/24 172.16.1.7/24 web02
nginx 網頁伺服器 10.0.0.8/24 172.16.1.8/24 web01
NFS 儲存伺服器 10.0.0.31/24 172.16.1.31/24 nfs01
rsync 備份伺服器 10.0.0.41/24 172.16.1.41/24 backup

要求:

搭建網站集合群後端 NFS 共用儲存搭建及最佳化解決方案
1、配置 NFS 服務:
要求:
1)在 NFS 服務端 nfs01 上共用/data 目錄,允許從 NFS 用戶端 web01、web02 上分別掛載共
享目錄。
2)當在 NFS 用戶端 web01 上的掛載點/data 寫入資料時,在 NFS 用戶端 web02 上也可以刪
除或修改。

(三)搭建網站集合群全網備份伺服器 backup
要求:在 backup 伺服器上配置 Rsync 資料同步服務,從 nfs01 伺服器上可以推送數
據到 backup 伺服器的/backup 目錄。 本
具體要求:backup 伺服器的備份目錄必須為/backup。
(四)解決網站集合群後端 NFS 共用儲存單點實現即時資料同步
1、即時資料同步要求:
當使用者通過任意台 網頁伺服器將資料寫入到 NFS 伺服器 nfs01 時,同時複製到備份伺服器
backup。

 

NFS伺服器 

第一個曆程碑:檢查NFS RPC服務軟體有沒有安裝

rpm -qa|grep nfs

rpm -qa|grep rpc

說明:預設centos系統沒有安裝nfs與rpc服務軟體

第二個曆程碑:進行yum安裝nfs與rpc服務軟體

yum install -y nfs-utils rpcbind

# yum install -y nfs-utils rpcbind

第三個裡程碑:進行NFS設定檔編寫

NFS服務組態檔

cat >>/etc/exports<<EOF          

/data  172.16.1.0/24(rw,sync)

EOF

第四個曆程碑:建立共用目錄

mkdir -p /data

chown -R nfsnobody.nfsnobody /data

第五個曆程碑:啟動服務

/etc/init.d/rpcbind start

查看NFS服務註冊資訊

# /usr/sbin/rpcinfo

# rpcinfo -p localhost

設定開機自啟動

chkconfig rpcbind on

chkconfig nfs on

查看rpcbind開機自啟序號

head -10 /etc/init.d/rpcbind

chkconfig: 2345 13 87

查看nfs開機自啟序號

# head -10 /etc/init.d/nfs

chkconfig: - 30 60

第六個曆程碑:檢查NFS服務配置,以及本地測試掛載

# showmount -e

# df -h

# cd /mnt

# echo "momoda" >oldoy.txt

# ll

total 4

-rw-r--r-- 1 nfsnobody nfsnobody 7 Aug 31 10:57 oldoy.txt

# cd /data

# cat oldboy.txt

momoda

 

web伺服器所做的 

第一個曆程碑:檢查NFS RPC服務軟體有沒有安裝

rpm -qa|grep nfs

rpm -qa|grep rpc

說明:預設centos系統沒有安裝nfs與rpc服務軟體

第二個曆程碑:進行yum安裝nfs與rpc服務軟體

yum install -y nfs-utils rpcbind

第三個曆程碑:檢測是否存在共用目錄,進行共用目錄掛載

#showmount -e 172.16.1.31

mount -t nfs 172.16.1.31:/data /mnt

df -h

 

rsync伺服器

 

 

第一個裡程碑:查看有沒有這個軟體

# rpm -qa rsync

第二個裡程碑:安裝rsync軟體

#yum install -y rsync

第三個曆程碑:編寫設定檔(編寫好設定檔,後續操作步驟可以按照設定檔進行)

#cat >>/etc/rsyncd.conf<<EOF

#created by HQ at 2017

##rsyncd.conf start##

 

uid = rsync

gid = rsync

use chroot = no

max connections = 200

timeout = 300

pid file = /var/run/rsyncd.pid

lock file = /var/run/rsync.lock

log file = /var/log/rsyncd.log

ignore errors

read only = false

list = false

hosts allow = 172.16.1.0/24

hosts deny = 0.0.0.0/32

auth users = rsync_backup

secrets file = /etc/rsync.password

[backup]

comment = "backup dir by oldboy"

path = /backup

EOF

 

第四個曆程碑:建立備份目錄的系統管理使用者

useradd -s /sbin/nologin -M rsync

第五個曆程碑:建立安全認證檔案

echo "rsync_backup:oldboy123" >/etc/rsync.password

chmod 600 /etc/rsync.password

第六個曆程碑:建立備份目錄

mkdir -p /backup

chown -R rsync.rsync /backup

第七個曆程碑:啟動rsync服務

rsync --daemon

 

 

 

NFS伺服器

2.5.3 用戶端部署

第一個裡程碑:查看有沒有這個軟體

rpm -qa rsync

第二個裡程碑:安裝rsync軟體

yum install -y rsync

第三個裡程碑:建立安全認證檔案

echo "oldboy123" >/etc/rsync.password

chmod 600 /etc/rsync.password

第四 測試

 rsync -avz /etc rsync_backup@172.16.1.41::backup

 

inotify伺服器:

部署安裝inotify-tools軟體

yum install -y inotify-tools

rpm -ql inotify-tools

 

第三個裡程碑:編寫inotify+rsync結合指令碼

[root@nfs01 server]# cd /server/scripts

[root@nfs01 scripts]# vim tongbu.sh

#!/bin/bash

###########

 

inotifywait -mrq /data  --format '%w%f'  -e create,delete,close_write,moved_to|\

while read line

do

    rsync -az --delete /data/ rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password

done

 sh tongbu.sh

 

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.