標籤:
AOF、RDB和複製功能對到期鍵的處理產生RDB檔案
在執行SAVE命令或者BGSAVE命令建立一個新的RDB檔案時,程式會對資料庫中的鍵進行檢查,已到期的鍵不會被儲存到新建立的RDB檔案中。
舉個例子,如果資料庫中包含三個鍵k1、k2、k3,並且k2已經到期,那麼當執行SAVE命令或者BGSAVE命令時,程式只會將k1和k3的資料儲存到RDB檔案中,而k2則會被忽略。
因此,資料庫中包含到期鍵不會對產生新的RDB檔案造成影響。
可參考rdb.c中函數rdbSave()函數源碼:
/* Iterate this DB writing every entry * * 遍曆資料庫,並寫入每個索引值對的資料 */ while((de = dictNext(di)) != NULL) { sds keystr = dictGetKey(de); robj key, *o = dictGetVal(de); long long expire; // 根據 keystr ,在棧中建立一個 key 對象 initStaticStringObject(key,keystr); // 擷取鍵的到期時間 expire = getExpire(db,&key); // 儲存索引值對資料 if (rdbSaveKeyValuePair(&rdb,&key,o,expire,now) == -1) goto werr; }
rdbSaveKeyValuePair函數實現如下:
/* Save a key-value pair, with expire time, type, key, value. * * 將索引值對的鍵、值、到期時間和類型寫入到 RDB 中。 * * On error -1 is returned. * * 出錯返回 -1 。 * * On success if the key was actually saved 1 is returned, otherwise 0 * is returned (the key was already expired). * * 成功儲存返回 1 ,當鍵已經到期時,返回 0 。 */int rdbSaveKeyValuePair(rio *rdb, robj *key, robj *val, long long expiretime, long long now){ /* Save the expire time * * 儲存鍵的到期時間 */ if (expiretime != -1) { /* If this key is already expired skip it * * 不寫入已經到期的鍵 */ if (expiretime < now) return 0; if (rdbSaveType(rdb,REDIS_RDB_OPCODE_EXPIRETIME_MS) == -1) return -1; if (rdbSaveMillisecondTime(rdb,expiretime) == -1) return -1; } /* Save type, key, value * * 檔案類型,鍵,值 */ if (rdbSaveObjectType(rdb,val) == -1) return -1; if (rdbSaveStringObject(rdb,key) == -1) return -1; if (rdbSaveObject(rdb,val) == -1) return -1; return 1;}
載入RDB檔案
在啟動Redis伺服器時,如果伺服器開啟了RDB功能,那麼伺服器將對RDB檔案進行載入:
- 如果伺服器以主伺服器模式運行,那麼在載入RDB檔案時,程式會對檔案中儲存的鍵進行檢查,未到期的鍵會被載入到資料庫中,而到期鍵則會被忽略,所以到期鍵對載入RDB檔案的主伺服器不會造成影響;
- 如果伺服器以從伺服器模式運行,那麼在載入RDB檔案時,檔案中儲存的所有鍵,不論是否到期,都會被載入到資料庫中。不過,因為主從伺服器在進行資料同步的時候,從伺服器的資料庫就會被清空,所以一般來講,到期鍵對載入RDB檔案的從伺服器也不會造成影響;
這部分代碼可以查看rdb.c中rdbLoad()函數源碼:
/* Check if the key already expired. This function is used when loading * an RDB file from disk, either at startup, or when an RDB was * received from the master. In the latter case, the master is * responsible for key expiry. If we would expire keys here, the * snapshot taken by the master may not be reflected on the slave. * * 如果伺服器為主節點的話, * 那麼在鍵已經到期的時候,不再將它們關聯到資料庫中去 */ if (server.masterhost == NULL && expiretime != -1 && expiretime < now) { decrRefCount(key); decrRefCount(val); // 跳過 continue; }
AOF檔案寫入
當伺服器以AOF持久化模式運行時,如果資料庫中的某個鍵已經到期,但它還沒有被惰性刪除或者定期刪除,那麼AOF檔案不會因為這個到期鍵而產生任何影響。
當到期鍵被惰性刪除或者定期刪除之後,程式會向AOF檔案追加(append)一條DEL命令,來顯式地記錄該鍵已被刪除。
舉個例子,如果用戶端使用GET message命令,試圖訪問到期的message鍵,那麼伺服器將執行以下三個動作:
1)從資料庫中刪除message鍵。
2)追加一條DEL message命令到AOF檔案。(根據AOF檔案增加的特點,AOF只有在用戶端進行請求的時候才會有這個DEL操作)
3)向執行GET命令的用戶端返回空回複。
這部分就是Redis中的惰性刪除策略中expireIfNeeded函數的使用。關於惰性刪除策略這一部分在Redis惰性刪除策略一篇中有講。所以這裡就不贅述了。
需要提示一下的是:expireIfNeeded函數是在db.c/lookupKeyRead()函數中被調用,lookupKeyRead函數用於在執行讀取操作時取出鍵key在資料庫db中的值。
redis學習筆記——RDB、AOF和複製時對到期鍵的處理