標籤:保護 庫檔案 linux環境 多個 讀取 ... 大記憶體 對象 後台運行
一、Redis介紹
Redis是當前比較熱門的NOSQL系統之一,它是一個key-value儲存系統。和Memcache類似,但很大程度補償了Memcache的不足,它支援儲存的value類型相對更多,包括string、list、set、zset和hash。這些資料類型都支援push/pop、add/remove及取交集並集和差集及更豐富的操作。在此基礎上,Redis支援各種不同方式的排序。
和Memcache一樣,Redis資料都是緩衝在電腦記憶體中,不同的是,Memcache只能將資料緩衝到記憶體中,無法自動定期寫入硬碟,這就表示,一斷電或重啟,記憶體清空,資料丟失。所以Memcache的應用情境適用於緩衝無需持久化的資料。而Redis不同的是它會周期性的把更新的資料寫入磁碟或者把修改操作寫入追加的記錄檔案,實現資料的持久化。
二、Redis的安裝
下面介紹在Linux環境下,Redis的安裝與部署
1、首先上官網下載Redis 壓縮包,地址:http://redis.io/download 下載穩定版3.0.7即可。
2、通過遠端管理工具,將壓縮包拷貝到Linux伺服器中,執行解壓操作
3、執行make 對Redis解壓後檔案進行編譯
編譯完成之後,可以看到解壓檔案redis-3.0.7 中會有對應的src、conf等檔案夾,這和windows下安裝解壓的檔案一樣,大部分安裝包都會有對應的類檔案、設定檔和一些命令檔案。
4、編譯成功後,進入src檔案夾,執行make install進行Redis安裝
5、安裝完成,介面如下
三、Redis的部署
安裝成功後,下面對Redis 進行部署
1、首先為了方便管理,將Redis檔案中的conf設定檔和常用命令移動到統一檔案中
a)建立bin和redis.conf檔案
複製代碼代碼如下:
mkdir -p/usr/local/redis/bin
mkdir -p/usr/local/redis/ect
b)執行Linux檔案移動命令:
複製代碼代碼如下:
mv /lamp/redis-3.0.7/redis.conf /usr/local/redis/etc
cd /lamp/redis-3.0.7/src
mv mkreleasdhdr.sh redis-benchmark redis-check-aof redis-check-dump redis-cli redis-server /usr/local/redis/bin
2、執行Redis-server 命令,啟動Redis 服務
注意:這裡直接執行Redis-server 啟動的Redis服務,是在前台直接啟動並執行(效果如),也就是說,執行完該命令後,如果Lunix關閉當前會話,則Redis服務也隨即關閉。正常情況下,啟動Redis服務需要從後台啟動,並且指定啟動設定檔。
3、後台啟動redis服務
a)首先編輯conf檔案,將daemonize屬性改為yes(表明需要在後台運行)
cd etc/
Vi redis.conf
b)再次啟動redis服務,並指定啟動服務組態檔
redis-server /usr/local/redis/etc/redis.conf
4、服務端啟動成功後,執行redis-cli啟動Redis 用戶端,查看連接埠號碼。
vim /etc/init.d/redis
#!/bin/sh
#
# redis Startup script for Redis Server
#
# chkconfig: - 80 12
# description: Redis is an open source, advanced key-value store.
#
# processname: redis-server
# config: /etc/redis.conf
# pidfile: /var/run/redis.pid
source /etc/init.d/functions
BIN="/usr/local/redis/bin"
CONFIG="/usr/local/redis/redis.conf"
PIDFILE="/var/run/redis.pid"
### Read configuration
[ -r "$SYSCONFIG" ] && source "$SYSCONFIG"
RETVAL=0
prog="redis-server"
desc="Redis Server"
start() {
if [ -e $PIDFILE ];then
echo "$desc already running...."
exit 1
fi
echo -n $"Starting $desc: "
daemon $BIN/$prog $CONFIG
RETVAL=$?
echo
[ $RETVAL -eq 0 ] && touch /var/lock/subsys/$prog
return $RETVAL
}
stop() {
echo -n $"Stop $desc: "
killproc $prog
RETVAL=$?
echo
[ $RETVAL -eq 0 ] && rm -f /var/lock/subsys/$prog $PIDFILE
return $RETVAL
}
restart() {
stop
start
}
case "$1" in
start)
start
;;
stop)
stop
;;
restart)
restart
;;
condrestart)
[ -e /var/lock/subsys/$prog ] && restart
RETVAL=$?
;;
status)
status $prog
RETVAL=$?
;;
*)
echo $"Usage: $0 {start|stop|restart|condrestart|status}"
RETVAL=1
esac
exit $RETVAL
chmod +x /etc/init.d/redis
service redis start
service redis stop
chkconfig --add redis
修改profile檔案:
# vi /etc/profile
在最後行添加:
export PATH="$PATH:/usr/local/redis/bin"
然後馬上應用這個檔案:
# . /etc/profile
配置下面的核心參數,否則Redis指令碼在重啟或停止redis時,將會報錯,並且不能自動在停止服務前同步資料到磁碟上/etc/sysctl.conf加上
#vim /etc/sysctl.conf
vm.overcommit_memory = 1
#sysctl -p
四、總結Linux 、Redis 操作常用命令
Linux:
cd /usr 從子檔案夾進入上級檔案夾usr
cd local 從父到子
mv /A /B 將檔案A移動到B
vi usr/local/redis/redis.conf 編輯redis.conf 檔案
:wq 儲存修改,並退出
Redis:
Redis-server /usr..../redis.conf 啟動redis服務,並指定設定檔
Redis-cli 啟動redis 用戶端
Pkill redis-server 關閉redis服務
Redis-cli shutdown 關閉redis用戶端
Netstat -tunpl|grep 6379 查看redis 預設連接埠號碼6379佔用情況
4. Redis的配置
4.1. Redis預設不是以守護進程的方式運行,可以通過該配置項修改,使用yes啟用守護進程
daemonize no
4.2. 當Redis以守護進程方式運行時,Redis預設會把pid寫入/var/run/redis.pid檔案,可以通過pidfile指定
pidfile /var/run/redis.pid
4.3. 指定Redis監聽連接埠,預設連接埠為6379,作者在自己的一篇博文中解釋了為什麼選用6379作為預設連接埠,因為6379在手機按鍵上MERZ對應的號碼,而MERZ取自意大利歌女Alessia Merz的名字
port 6379
4.4. 綁定的主機地址
bind 127.0.0.1
4.5.當 用戶端閑置多長時間後關閉串連,如果指定為0,表示關閉該功能
timeout 300
4.6. 指定日誌記錄層級,Redis總共支援四個層級:debug、verbose、notice、warning,預設為verbose
loglevel verbose
4.7. 日誌記錄方式,預設為標準輸出,如果配置Redis為守護進程方式運行,而這裡又配置為日誌記錄方式為標準輸出,則日誌將會發送給/dev/null
logfile stdout
4.8. 設定資料庫的數量,預設資料庫為0,可以使用SELECT <dbid>命令在串連上指定資料庫id
databases 16
4.9. 指定在多長時間內,有多少次更新操作,就將資料同步到資料檔案,可以多個條件配合
save <seconds> <changes>
Redis預設設定檔中提供了三個條件:
save 900 1
save 300 10
save 60 10000
分別表示900秒(15分鐘)內有1個更改,300秒(5分鐘)內有10個更改以及60秒內有10000個更改。
4.10. 指定儲存至本機資料庫時是否壓縮資料,預設為yes,Redis採用LZF壓縮,如果為了節省CPU時間,可以關閉該選項,但會導致資料庫檔案變的巨大
rdbcompression yes
4.11. 指定本機資料庫檔案名稱,預設值為dump.rdb
dbfilename dump.rdb
4.12. 指定本機資料庫存放目錄
dir ./
4.13. 設定當本機為slav服務時,設定master服務的IP地址及連接埠,在Redis啟動時,它會自動從master進行資料同步
slaveof <masterip> <masterport>
4.14. 當master服務設定了密碼保護時,slav服務串連master的密碼
masterauth <master-password>
4.15. 設定Redis串連密碼,如果配置了串連密碼,用戶端在串連Redis時需要通過AUTH <password>命令提供密碼,預設關閉
requirepass foobared
4.16. 設定同一時間最大用戶端串連數,預設無限制,Redis可以同時開啟的用戶端串連數為Redis進程可以開啟的最大檔案描述符數,如果設定 maxclients 0,表示不作限制。當用戶端串連數到達限制時,Redis會關閉新的串連並向用戶端返回max number of clients reached錯誤資訊
maxclients 128
4.17. 指定Redis最大記憶體限制,Redis在啟動時會把資料載入到記憶體中,達到最大記憶體後,Redis會先嘗試清除已到期或即將到期的Key,當此方法處理 後,仍然到達最大記憶體設定,將無法再進行寫入操作,但仍然可以進行讀取操作。Redis新的vm機制,會把Key存放記憶體,Value會存放在swap區
maxmemory <bytes>
4.18. 指定是否在每次更新操作後進行日誌記錄,Redis在預設情況下是非同步把資料寫入磁碟,如果不開啟,可能會在斷電時導致一段時間內的資料丟失。因為 redis本身同步資料檔案是按上面save條件來同步的,所以有的資料會在一段時間內只存在於記憶體中。預設為no
appendonly no
4.19. 指定更新記錄檔名,預設為appendonly.aof
appendfilename appendonly.aof
4.20. 指定更新日誌條件,共有3個可選值:
no:表示等作業系統進行資料緩衝同步到磁碟(快)
always:表示每次更新操作後手動調用fsync()將資料寫到磁碟(慢,安全)
everysec:表示每秒同步一次(折衷,預設值)
appendfsync everysec
4.21. 指定是否啟用虛擬記憶體機制,預設值為no,簡單的介紹一下,VM機制將資料分頁存放,由Redis將訪問量較少的頁即冷資料swap到磁碟上,訪問多的頁面由磁碟自動換出到記憶體中(在後面的文章我會仔細分析Redis的VM機制)
vm-enabled no
4.22. 虛擬記憶體檔案路徑,預設值為/tmp/redis.swap,不可多個Redis執行個體共用
vm-swap-file /tmp/redis.swap
4.23. 將所有大於vm-max-memory的資料存入虛擬記憶體,無論vm-max-memory設定多小,所有索引資料都是記憶體儲存的(Redis的索引資料 就是keys),也就是說,當vm-max-memory設定為0的時候,其實是所有value都存在於磁碟。預設值為0
vm-max-memory 0
4.24. Redis swap檔案分成了很多的page,一個對象可以儲存在多個page上面,但一個page上不能被多個對象共用,vm-page-size是要根據儲存的 資料大小來設定的,作者建議如果儲存很多小對象,page大小最好設定為32或者64bytes;如果儲存很大大對象,則可以使用更大的page,如果不 確定,就使用預設值
vm-page-size 32
4.25. 設定swap檔案中的page數量,由於頁表(一種表示頁面空閑或使用的bitmap)是在放在記憶體中的,,在磁碟上每8個pages將消耗1byte的記憶體。
vm-pages 134217728
4.26. 設定訪問swap檔案的線程數,最好不要超過機器的核心數,如果設定為0,那麼所有對swap檔案的操作都是串列的,可能會造成比較長時間的延遲。預設值為4
vm-max-threads 4
4.27. 設定在向用戶端應答時,是否把較小的包合并為一個包發送,預設為開啟
glueoutputbuf yes
4.28. 指定在超過一定的數量或者最大的元素超過某一臨界值時,採用一種特殊的雜湊演算法
hash-max-zipmap-entries 64
hash-max-zipmap-value 512
4.29. 指定是否啟用重設雜湊,預設為開啟(後面在介紹Redis的雜湊演算法時具體介紹)
activerehashing yes
4.30. 指定包含其它的設定檔,可以在同一主機上多個Redis執行個體之間使用同一份設定檔,而同時各個執行個體又擁有自己的特定設定檔
include /path/to/local.conf
Linux下Redis的安裝和部署