Redis概述:
redis
是一個基於Key-Value的持久化數據庫存儲,支持豐富的數據類型,用C語言編寫,可基於內存又可持久化的日誌型、Key-Value數據庫,並提供多種語言的API
算法
Redis特色
數據庫
一、Key-Value健值類型存儲緩存
二、支持數據可靠存儲及落地
安全
三、單進程單線程高性能服務器
服務器
四、單機qps(每秒查詢率)能夠達到10w
app
五、適合小數據量高速讀寫訪問
less
Redis跟Memached的不一樣dom
一、Redis能夠持久化數據存儲
異步
二、性能高很,Redis能支持超過10W每秒的讀寫頻率
三、豐富的數據類型,Redis支持二進制的String、Lists、Hashes、Sets及sorted Sets(有序集合)等數據類型操做
四、Redis的全部操做都是原子性的
五、支持發佈訂閱功能
六、支持異步主從複製
【主從生產環境配置文件】
Master配置文件
daemonize yes
pidfile /ryzc/redis/redis.pid
port 30000
timeout 0
databases 16
maxclients 10000
dir /ryzc/redis/
syslog-enabled no
slowlog-log-slower-than -1
appendonly no
auto-aof-rewrite-percentage 0
requirepass kik4asfljweiojlsfjlasjfc56uhj75Ojdw2fdf
Slave配置文件
daemonize yes
pidfile /ryzc/redis/redis.pid
port 90022
timeout 0
databases 16
maxclients 10000
dir /ryzc/redis/
syslog-enabled no
slowlog-log-slower-than -1
appendonly no
auto-aof-rewrite-percentage 0
requirepass kik4asfljweiojlsfjlasjfc56uhj75Ojdw2fdf
masterauth kik4asfljweiojlsfjlasjfc56uhj75Ojdw2fdf
slaveof 127.0.0.1 30000
【配置文件解析】
1. Redis默認不是以守護進程的方式運行,能夠經過該配置項修改,使用yes啓用守護進程
daemonize no
2. 當Redis以守護進程方式運行時,Redis默認會把pid寫入/var/run/redis.pid文件,能夠經過pidfile指定
pidfile /var/run/redis.pid
3. 指定Redis監聽端口,默認端口爲6379,做者在本身的一篇博文中解釋了爲何選用6379做爲默認端口,由於6379在手機按鍵上MERZ對應的號碼,而MERZ取自意大利歌女Alessia Merz的名字
port 6379
4. 綁定的主機地址
bind 127.0.0.1
5.當 客戶端閒置多長時間後關閉鏈接,若是指定爲0,表示關閉該功能
timeout 300
6. 指定日誌記錄級別,Redis總共支持四個級別:debug、verbose、notice、warning,默認爲verbose
loglevel verbose
debug:很詳細的信息,適合開發和測試
verbose:包含許多不太有用的信息,但比debug要清爽一些
notice:比較適合生產環境
warning:警告信息
7. 日誌記錄方式,默認爲標準輸出,若是配置Redis爲守護進程方式運行,而這裏又配置爲日誌記錄方式爲標準輸出,則日誌將會發送給/dev/null
logfile stdout
8. 設置數據庫的數量,默認數據庫爲0,可使用SELECT <dbid>命令在鏈接上指定數據庫id
databases 16
9. 指定在多長時間內,有多少次更新操做,就將數據同步到數據文件,能夠多個條件配合
save <seconds> <changes>
Redis默認配置文件中提供了三個條件:
save 900 1
save 300 10
save 60 10000
分別表示900秒(15分鐘)內有1個更改,300秒(5分鐘)內有10個更改以及60秒內有10000個更改。
# 過了900秒而且有1個key發生了改變 就會觸發save動做
# 過了300秒而且有10個key發生了改變 就會觸發save動做
# 過了60秒而且至少有10000個key發生了改變 也會觸發save動做
10. 指定存儲至本地數據庫時是否壓縮數據,默認爲yes,Redis採用LZF壓縮,若是爲了節省CPU時間,能夠關閉該選項,但會致使數據庫文件變的巨大
rdbcompression yes
11. 指定本地數據庫文件名,默認值爲dump.rdb,數據會被持久化到這個目錄下的‘dbfilename’指定的文件中。
dbfilename dump.rdb
12. 指定本地數據庫存放目錄,這裏指定的必須是目錄而不能是文件。
dir ./
13. 設置當本機爲slav服務時,設置master服務的IP地址及端口,在Redis啓動時,它會自動從master進行數據同步
slaveof <masterip> <masterport>
14. 當master服務設置了密碼保護時,slav服務鏈接master的密碼
masterauth <master-password>
15. 設置Redis鏈接密碼,若是配置了鏈接密碼,客戶端在鏈接Redis時須要經過AUTH <password>命令提供密碼,默認關閉
requirepass foobared
16. 設置同一時間最大客戶端鏈接數,默認無限制,Redis能夠同時打開的客戶端鏈接數爲Redis進程能夠打開的最大文件描述符數,若是設置 maxclients 0,表示不做限制。當客戶端鏈接數到達限制時,Redis會關閉新的鏈接並向客戶端返回max number of clients reached錯誤信息
maxclients 128
17. 指定Redis最大內存限制,Redis在啓動時會把數據加載到內存中,達到最大內存後,Redis會先嚐試清除已到期或即將到期的Key,當此方法處理 後,仍然到達最大內存設置,將沒法再進行寫入操做,但仍然能夠進行讀取操做。Redis新的vm機制,會把Key存放內存,Value會存放在swap區
maxmemory <bytes>
18. 指定是否在每次更新操做後進行日誌記錄,Redis在默認狀況下是異步的把數據寫入磁盤,若是不開啓,可能會在斷電時致使一段時間內的數據丟失。由於 redis自己同步數據文件是按上面save條件來同步的,因此有的數據會在一段時間內只存在於內存中。默認爲no
appendonly no
19. 指定更新日誌文件名,默認爲appendonly.aof
appendfilename appendonly.aof
20. 指定更新日誌條件,共有3個可選值:
no:表示等操做系統進行數據緩存同步到磁盤(快)
always:表示每次更新操做後手動調用fsync()將數據寫到磁盤(慢,安全)
everysec:表示每秒同步一次(折衷,默認值)
appendfsync everysec
21. 指定是否啓用虛擬內存機制,默認值爲no,簡單的介紹一下,VM機制將數據分頁存放,由Redis將訪問量較少的頁即冷數據swap到磁盤上,訪問多的頁面由磁盤自動換出到內存中(在後面的文章我會仔細分析Redis的VM機制)
vm-enabled no
22. 虛擬內存文件路徑,默認值爲/tmp/redis.swap,不可多個Redis實例共享
vm-swap-file /tmp/redis.swap
23. 將全部大於vm-max-memory的數據存入虛擬內存,不管vm-max-memory設置多小,全部索引數據都是內存存儲的(Redis的索引數據 就是keys),也就是說,當vm-max-memory設置爲0的時候,實際上是全部value都存在於磁盤。默認值爲0
vm-max-memory 0
24. Redis swap文件分紅了不少的page,一個對象能夠保存在多個page上面,但一個page上不能被多個對象共享,vm-page-size是要根據存儲的 數據大小來設定的,做者建議若是存儲不少小對象,page大小最好設置爲32或者64bytes;若是存儲很大大對象,則可使用更大的page,若是不 肯定,就使用默認值
vm-page-size 32
25. 設置swap文件中的page數量,因爲頁表(一種表示頁面空閒或使用的bitmap)是在放在內存中的,,在磁盤上每8個pages將消耗1byte的內存。
vm-pages 134217728
26. 設置訪問swap文件的線程數,最好不要超過機器的核數,若是設置爲0,那麼全部對swap文件的操做都是串行的,可能會形成比較長時間的延遲。默認值爲4
vm-max-threads 4
27. 設置在向客戶端應答時,是否把較小的包合併爲一個包發送,默認爲開啓
glueoutputbuf yes
28. 指定在超過必定的數量或者最大的元素超過某一臨界值時,採用一種特殊的哈希算法
hash-max-zipmap-entries 64
hash-max-zipmap-value 512
29. 指定是否激活重置哈希,默認爲開啓(後面在介紹Redis的哈希算法時具體介紹)
activerehashing yes
30. 指定包含其它的配置文件,能夠在同一主機上多個Redis實例之間使用同一份配置文件,而同時各個實例又擁有本身的特定配置文件
include /path/to/local.conf
31. 'syslog-enabled'設置爲yes會把日誌輸出到系統日誌,默認是no
syslog-enabled no
32. 指定syslog的標示符,若是'syslog-enabled'是no,則這個選項無效。
syslog-ident redis
33. 指定syslog 設備(facility), 必須是user或者local0到local7.
syslog-facility local
34. 複製冗餘
Master-Slave replication. 使用slaveof把一個 Redis 實例設置成爲另外一個Redis server的從庫(熱備). 注意: #配置只對當前slave有效。
所以能夠把某個slave配置成使用不一樣的時間間隔來保存數據或者監聽其餘端口等等。
命令格式:
slaveof <masterip> <masterport>
若是master有密碼保護,則在slave與master進行數據同步以前須要進行密碼校驗,不然master會拒絕slave的請#求。
masterauth <master-password>
當slave丟失與master的鏈接時,或者slave仍然在於master進行數據同步時(尚未與master保持一致),#slave能夠有兩種方式來響應客戶端請求:
1) 若是 slave-serve-stale-data 設置成 'yes' (the default) slave會仍然響應客戶端請求,此時可能會有問題。
2) 若是 slave-serve-stale data設置成 'no' slave會返回"SYNC with master in progress"這樣的錯誤信息。 但 INFO 和SLAVEOF命令除外。
slave-serve-stale-data yes
35. 命令重命名,將get命令改爲wget命令
rename-command get wget
36. 一樣能夠經過把一個命令重命名爲空串來完全kill掉這個命令,屏蔽set命令,好比:
rename-command set ""
37. 最大可以使用內存。若是超過,Redis會試圖刪除EXPIRE集合中的keys,具體作法是:Redis會試圖釋放即將過時的#keys,而保護還有很長生命週期的keys。
若是這樣還不行,Redis就會報錯,但像GET之類的查詢請求仍是會獲得響應。
警告:若是你想把Redis視爲一個真正的DB的話,那不要設置<maxmemory>,只有你只想把Redis做爲cache或者
有狀態的server('state' server)時才須要設置。
maxmemory <bytes>
內存清理策略:若是達到了maxmemory,你能夠採起以下動做:
volatile-lru -> 使用LRU算法來刪除過時的set
allkeys-lru -> 刪除任何遵循LRU算法的key
volatile-random ->隨機地刪除過時set中的key
allkeys->random -> 隨機地刪除一個key
volatile-ttl -> 刪除最近即將過時的key(the nearest expire time (minor TTL))
noeviction -> 根本不過時,寫操做直接報錯
默認策略:
maxmemory-policy volatile-lru
對於處理redis內存來講,LRU和minor TTL算法不是精確的,而是近似的(估計的)算法。因此咱們會檢查某些樣本#來達到內存檢查的目的。默認的樣本數是3,你能夠修改它。
maxmemory-samples 3
38. 默認狀況下,Redis會異步的把數據保存到硬盤。若是你的應用場景容許由於系統崩潰等極端狀況而致使最新數據丟失#的話,那這種作法已經很ok了。不然你應該打開‘append only’模式,開啓這種模式後,Redis會在#appendonly.aof文件中添加每個寫操做,這個文件會在Redis啓動時被讀取來在內存中從新構建數據集。
注意:若是你須要,你能夠同時開啓‘append only’模式和異步dumps模式(你須要註釋掉上面的‘save’表達式來禁#止dumps),這種狀況下,Redis重建數據集時會優先使用appendonly.aof而忽略dump.rdb
appendonly no
append only 文件名 (默認: "appendonly.aof")
appendfilename appendonly.aof
調用fsync()函數通知操做系統馬上向硬盤寫數據
Redis支持3中模式:
no:不fsync, 只是通知OS能夠flush數據了,具體是否flush取決於OS.性能更好.
always: 每次寫入append only 日誌文件後都會fsync . 性能差,但很安全.
everysec: 沒間隔1秒進行一次fsync. 折中.
默認是 "everysec"
appendfsync always
appendfsync everysec
appendfsync no
當AOF fsync策略被設置爲always或者everysec而且後臺保存進程(saving process)正在執行大量I/O操做時
Redis可能會在fsync()調用上阻塞過長時間
no-appendfsync-on-rewrite no
39. append only 文件的自動重寫
當AOF 日誌文件即將增加到指定百分比時,Redis能夠經過調用BGREWRITEAOF 來自動重寫append only文件。
它是這麼幹的:Redis會記住最近一次重寫後的AOF 文件size。而後它會把這個size與當前size進行比較,若是當前# size比指定的百分比大,就會觸發重寫。一樣,你須要指定AOF文件被重寫的最小size,這對避免雖然百分比達到了# 可是實際上文件size仍是很小(這種狀況沒有必要重寫)卻致使AOF文件重寫的狀況頗有用。
auto-aof-rewrite-percentage 設置爲 0 能夠關閉AOF重寫功能
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
40. slow log
Redis slow log用來記錄超過指定執行時間的查詢。
你能夠指定兩個參數:一個是慢查詢的閥值,單位是毫秒;另一個是slow log的長度,至關於一個隊列。
負數則關閉slow log,0則會致使每一個命令都被記錄
slowlog-log-slower-than 10000
# 不設置會消耗過多內存,因此仍是要設置一下。可使用SLOWLOG RESET命令來回收slow log使用的內存
slowlog-max-len 1024