RocketMQ 系統最佳化(CentOS)

標籤：style   http   color   io   os   使用   ar   檔案   sp   

貼出源碼中的最佳化指令碼先:

#!/bin/sh## Execute Only Once#echo ‘vm.overcommit_memory=1‘ >> /etc/sysctl.confecho ‘vm.min_free_kbytes=5000000‘ >> /etc/sysctl.confecho ‘vm.drop_caches=1‘ >> /etc/sysctl.confecho ‘vm.zone_reclaim_mode=0‘ >> /etc/sysctl.confecho ‘vm.max_map_count=655360‘ >> /etc/sysctl.confecho ‘vm.dirty_background_ratio=50‘ >> /etc/sysctl.confecho ‘vm.dirty_ratio=50‘ >> /etc/sysctl.confecho ‘vm.page-cluster=3‘ >> /etc/sysctl.confecho ‘vm.dirty_writeback_centisecs=360000‘ >> /etc/sysctl.confecho ‘vm.swappiness=10‘ >> /etc/sysctl.confsysctl -pecho ‘ulimit -n 655350‘ >> /etc/profileecho ‘admin hard nofile 655350‘ >> /etc/security/limits.confDISK=`df -k | sort -n -r -k 2 | awk -F/ ‘NR==1 {gsub(/[0-9].*/,"",$3); print $3}‘`[ "$DISK" = ‘cciss‘ ] && DISK=‘cciss!c0d0‘echo ‘deadline‘ > /sys/block/$DISK/queue/schedulerecho "---------------------------------------------------------------"sysctl vm.overcommit_memorysysctl vm.min_free_kbytessysctl vm.drop_cachessysctl vm.zone_reclaim_modesysctl vm.max_map_countsysctl vm.dirty_background_ratiosysctl vm.dirty_ratiosysctl vm.page-clustersysctl vm.dirty_writeback_centisecssysctl vm.swappinesssu - admin -c ‘ulimit -n‘cat /sys/block/$DISK/queue/scheduler

這個指令碼分別修改了網路參數 、admin的硬資源限制 、硬碟的刷盤模式

看了下 不能直接運行 

需要做以下更改

這個指令碼中使用了admin 這個使用者，估計阿里的mq是用admin啟動的

如果你用root啟動RocketMQ 其中的 

echo ‘ulimit -n 655350‘ >> /etc/profileecho ‘admin hard nofile 655350‘ >> /etc/security/limits.conf

 這兩行可以注釋掉， 不過生產環境中還是不推薦直接用root啟動服務，所以我useradd admin了。

另個是硬碟最佳化部分

首先需要知道RockerMQ 運行產生的檔案log 都會放在運行使用者的家目錄中

所以可以在home目錄中建個admin 然後將盤掛到/home/admin就可以

接下來是硬碟刷盤模式（ I/O Scheduling）

DISK=`df -k | sort -n -r -k 2 | awk -F/ ‘NR==1 {gsub(/[0-9].*/,"",$3); print $3}‘`[ "$DISK" = ‘cciss‘ ] && DISK=‘cciss!c0d0‘echo ‘deadline‘ > /sys/block/$DISK/queue/scheduler

這個也不適用於筆者的環境。目的是要把硬碟的刷盤模式改為deadline

查看下當前硬碟刷盤模式（筆者硬碟為sda）

#cat /sys/block/sda/queue/schedulernoop anticipatory deadline [cfq]

好吧手動改下

echo ‘deadline‘ > /sys/block/sda/queue/scheduler

這種方式是立即生效 但是重啟後會丟失

如果需要重啟後也是deadline 需要添加grub參數

編輯/etc/grub.conf

找到kernel那行 在最後添加

elevator=deadline

至此完成了此指令碼中所做的最佳化

最後貼出一份筆者改後的（僅僅把參數變數化 方便複用）

注意: (需要root 或 sudo許可權才可執行) 請將指令碼中使用者和盤符換成你的

sed ‘s/kernel.*$/& elevator=deadline/‘ /etc/grub.conf

#!/bin/sh## Execute Only Once 只可執行一次##使用者名稱USER=admin#磁碟盤符DISK=sda##在grub.conf中添加參數 預設注釋掉 需要使用請取消注釋#sed -i ‘s/kernel.*$/& elevator=deadline/‘ /etc/grub.confecho ‘vm.overcommit_memory=1‘ >> /etc/sysctl.confecho ‘vm.min_free_kbytes=5000000‘ >> /etc/sysctl.confecho ‘vm.drop_caches=1‘ >> /etc/sysctl.confecho ‘vm.zone_reclaim_mode=0‘ >> /etc/sysctl.confecho ‘vm.max_map_count=655360‘ >> /etc/sysctl.confecho ‘vm.dirty_background_ratio=50‘ >> /etc/sysctl.confecho ‘vm.dirty_ratio=50‘ >> /etc/sysctl.confecho ‘vm.page-cluster=3‘ >> /etc/sysctl.confecho ‘vm.dirty_writeback_centisecs=360000‘ >> /etc/sysctl.confecho ‘vm.swappiness=10‘ >> /etc/sysctl.confsysctl -pecho "ulimit -n 655350" >> /etc/profileecho "$USER hard nofile 655350" >> /etc/security/limits.confecho ‘deadline‘ > /sys/block/$DISK/queue/schedulerecho "---------------------------------------------------------------"sysctl vm.overcommit_memorysysctl vm.min_free_kbytessysctl vm.drop_cachessysctl vm.zone_reclaim_modesysctl vm.max_map_countsysctl vm.dirty_background_ratiosysctl vm.dirty_ratiosysctl vm.page-clustersysctl vm.dirty_writeback_centisecssysctl vm.swappinesssu - $USER -c ‘ulimit -n‘cat /sys/block/$DISK/queue/scheduler

至此 最佳化結束。

I/O Scheduling 配置參照 http://doc.opensuse.org/products/draft/SLES/SLES-tuning_sd_draft/cha.tuning.io.html#cha.tuning.io.schedulers

阿里os.sh源指令碼:

https://github.com/alibaba/RocketMQ/blob/develop/bin/os.sh

RocketMQ 系統最佳化(CentOS)