NoSQL-Redis

介紹
Redis和Memcached相似，也屬於k-v數據存儲
Redis官網redis.io, 當前最新穩定版4.0.1
支持更多value類型，除了和string外，還支持hash、lists（鏈表）、sets（集合）和sorted sets（有序集合）
redis使用了兩種文件格式：全量數據(RDB)和增量請求(aof)。全量數據格式是把內存中的數據寫入磁盤，便於下次讀取文件進行加載。增量請求文件則是把內存中的數據序列化爲操做請求，用於讀取文件進行replay獲得數據，這種相似於mysql binlog。
redis的存儲分爲內存存儲、磁盤存儲和log文件三部分
.
安裝
cd /usr/local/src/
wget http://download.redis.io/releases/redis-4.0.1.tar.gz
cd redis-4.0.1
make && make install
cp redis.conf /etc/redis.conf
vim /etc/redis.conf //修改以下配置
daemonize yes
logfile "/var/log/redis.log"
dir /data/redis_data/
appendonly yes
mkdir /data/redis_data
sysctl vm.overcommit_memory=1
echo never > /sys/kernel/mm/transparent_hugepage/enabled
redis-server /etc/redis.conf
.
Redis持久化
Redis提供了兩種持久化的方式，分別是RDB（Redis DataBase）和AOF（Append Only File）
RDB，簡而言之，就是在不一樣的時間點，將redis存儲的數據生成快照並存儲到磁盤等介質上。
打開rdb，配置文件裏：
save [秒數] [前述秒數內更改次數] 保存
AOF，則是換了一個角度來實現持久化，那就是將redis執行過的全部寫指令記錄下來，在下次redis從新啓動時，只要把這些寫指令從前到後再重複執行一遍，就能夠實現數據恢復了。
打開aof，appendfsync [頻率]
其實RDB和AOF兩種方式也能夠同時使用，在這種狀況下，若是redis重啓的話，則會優先採用AOF方式來進行數據恢復，這是由於AOF方式的數據恢復完整度更高。
若是你沒有數據持久化的需求，也徹底能夠關閉RDB和AOF方式，這樣的話，redis將變成一個純內存數據庫，就像memcache同樣。
save 900 1 #表示每15分鐘且至少有1個key改變，就觸發一次持久化 
save 300 10 #表示每5分鐘且至少有10個key改變，就觸發一次持久化
save 60 10000 #表示每60秒至少有10000個key改變，就觸發一次持久
save 「」 #這樣能夠禁用rdb持久化
appendonly yes #若是是yes，則開啓aof持久化
appendfilename 「appendonly.aof」 # 指定aof文件名字
appendfsync everysec #指定fsync()調用模式，有三種no(不調用fsync),always(每次寫都會調用fsync),everysec(每秒鐘調用一次fsync)。第一種最快，第二種數據最安全，但性能會差一些，第三種爲這種方案，默認爲第三種。

.
redis數據類型
string
string爲最簡單的類型，與Memcached同樣的類型，一個key對應一個value，其支持的操做與Memcached的操做相似，它的功能更豐富。設置能夠存二進制的對象。
list
list是一個鏈表結構，主要功能是push、pop、獲取一個範圍的全部值等等。操做中key理解爲鏈表的名字。
使用 list 結構，咱們能夠輕鬆地實現最新消息排行等功能（好比新浪微博的 TimeLine ）。list 的另外一個應用就是消息隊列，能夠利用 list 的 push操做，將任務存在 list 中，而後工做線程再用pop操做將任務取出進行執行。
set
set是集合，和咱們數學中的集合概念類似，對集合的操做有添加刪除元素，有對多個集合求交併差等操做。操做中key理解爲集合的名字。好比在微博應用中，能夠將一個用戶全部的關注人存在一個集合中，將其全部粉絲存在一個集合。由於 Redis 很是人性化的爲集合提供了求交集、並集、差集等操做，那麼就能夠很是方便的實現如共同關注、共同喜愛、二度好友等功能，對上面的全部集合操做，你還可使用不一樣的命令選擇將結果返回給客戶端仍是存集到一個新的集合中。
sort-set
sorted set是有序集合，它比set多了一個權重參數score，使得集合中的元素可以按 score 進行有序排列，好比一個存儲全班同窗成績的 Sorted Sets，其集合 value 能夠是同窗的學號，而 score 就能夠是其考試得分，這樣在數據插入集合的時候，就已經進行了自然的排序。
hash
在 Memcached 中，咱們常常將一些結構化的信息打包成 hashmap，在客戶端序列化後存儲爲一個字符串的值（通常是 JSON 格式），好比用戶的暱稱、年齡、性別、積分等。
.
redis經常使用操做
set key1 aminglinux
get key1
set key1 aming//第二次賦值會覆蓋
setnx key2 aaa //返回1 若是key2不存在直接建立key
setnx key2 bbb //返回0，若是key2存在，返回0
setex key3 10 1 //給key3設置過時時間爲10s，值爲1，若key已經存在，會覆蓋新的值
mset k1 1 k2 a k3 c
mget k1 k3 k2
lpush lista a //從左側加入一個元素
lpush lista b
lrange lista 0 -1
lpop lista //從左側取出第一個元素
rpush lista 1 //從右側加入一個元素
rpop lista //從右側取出第一個元素
linsert  lista  before  2 3  //在2的前面插入一個元素爲3
lset lista 4 bbb  //把第5個元素修改成bbb
lindex lista 0  //查看第1個元素
lindex lista 3  //查看第4個元素
llen lista  //查看鏈表中有幾個元素
sadd seta aaa  //向集合seta中放入元素
smembers seta   //查看集合中的全部元素
srem  seta    aaa //刪除元素
spop  seta    //隨機取出一個元素，刪除
sdiff  seta  setb   //求差集，以seta爲標準
sdiffstore setc seta setb   //求差集而且存儲，存儲到了setc裏
sinter seta setb //求交集
sinterstore  setd seta setb  //將交集存儲setd
sunion seta setb //求並集
sunionstore sete seta setb //求並集並存儲到sete
sismember seta aaa  //判斷一個元素是否屬於一個集合
srandmember  seta //隨機取出一個元素，但不刪除
zadd zseta 11 123 //建立有序集合
zrange zseta 0 -1 //顯示全部元素，按順序顯示
zrange zseta 0 -1 withscores //能夠帶上分值
zrem zseta 222 //刪除指定元素
zrank zseta 222 //返回元素的索引值，索引值從0開始，按score正向排序
zrevrank zseta 222 //同上，不一樣的是，按score反序排序
zrevrange zseta 0 -1 反序顯示全部元素，並帶分值
zcard zseta //返回集合中全部元素的個數
zcount zseta 1 10 // 返回分值範圍1-10的元素個數
zrangebyscore zseta 1 10 // 返回分值範圍1-10的元素
zremrangebyrank zseta 0 2 //刪除索引範圍0-2的元素，按score正向排序
zremrangebyscore zseta 1 10 //刪除分值範圍1-10的元素
hset user1  name aming  //創建hash
hset user1 age 30
hset user1 job  it
hgetall user1
hmset user2  name aming age 30  job it    //批量創建鍵值對
hmget user2
hmget user2 name age  job
hdel user2 job   //刪除指定filed
hkeys user2  //打印全部的key
hvals user2 //打印全部的values
hlen user2  //查看hash有幾個filed
keys * //取出全部key
keys my* //模糊匹配
exists name //有name鍵 返回1 ，不然返回0；
del key1 // 刪除一個key //成功返回1 ，不然返回0；
EXPIRE key1 100 //設置key1 100s後過時
ttl key // 查看鍵 還有多長時間過時，單位是s,當 key 不存在時，返回 -2 。 當 key 存在但沒有設置剩餘生存時間時，返回 -1 。 不然，返回 key 的剩餘生存時間。
select 0 //表明選擇當前數據庫，默認進入0 數據庫
move age 1 // 把age 移動到1 數據庫
persist key1 //取消key1的過時時間
randomkey //隨機返回一個key
rename oldname newname //重命名key
type key1 //返回鍵的類型
dbsize  //返回當前數據庫中key的數目
info  //返回redis數據庫狀態信息
flushdb //清空當前數據庫中全部的鍵
flushall    //清空全部數據庫中的全部的key
bgsave //保存數據到 rdb文件中，在後臺運行
save //做用同上，可是在前臺運行
config get * //獲取全部配置參數
config get dir //獲取配置參數
config set dir //更改配置參數
數據恢復： 首先定義或者肯定dir目錄和dbfilename，而後把備份的rdb文件放到dir目錄下面，重啓redis服務便可恢復數據
.
redis安全設置
設置監聽ip
bind 127.0.0.1 2.2.2.2//能夠是多個ip，用空格分隔
設置監聽端口
port 16000
設置密碼
requirepass aming>com
redis-cli -a 'aming>com'
將config命令更名
rename-command CONFIG aming
禁掉config命令
rename-command CONFIG 「」
.
慢查詢日誌
編輯配置文件/etc/redis.conf
針對慢查詢日誌，能夠設置兩個參數，一個是執行時長，單位是微秒，另外一個是慢查詢日誌的長度。當一個新的命令被寫入日誌時，最老的一條會從命令日誌隊列中被移除。
slowlog-log-slower-than 1000 //單位ms，表示慢於1000ms則記錄日誌
slowlog-max-len 128 //定義日誌長度，表示最多存128條
如下爲命令
slowlog get //列出全部的慢查詢日誌
slowlog get 2 //只列出2條
slowlog len //查看慢查詢日誌條數
.
php安裝redis擴展模塊
cd /usr/local/src
wget https://coding.net/u/aminglinux/p/yuanke_centos7/git/raw/master/21NOSQL/phpredis.zip
unzip phpredis.zip
cd phpredis-develop
/usr/local/php-fpm/bin/phpize
./configure --with-php-config=/usr/local/php-fpm/bin/php-config
make
make install
vim /usr/local/php.ini//增長extension=redis.so
/usr/local/php-fpm/bin/php -m|grep redis//看是否有redis模塊
重啓php-fpm服務

.
存儲session
vim /usr/local/php-fpm/etc/php.ini//更改或增長
session.save_handler = "redis"
session.save_path = "tcp://127.0.0.1:6379"

或者apache虛擬主機配置文件中也能夠這樣配置：
php_value session.save_handler " redis" php_value session.save_path " tcp://127.0.0.1:6379" 

或者php-fpm配置文件對應的pool中增長：
php_value[session.save_handler] = redis
php_value[session.save_path] = " tcp://127.0.0.1:6379 "
wgt http://study.lishiming.net/.mem_se.txt
mv .mem_se.txt /usr/local/apache2/htdocs/session.php
其中session.php內容能夠參考https://coding.net/u/aminglinux/p/yuanke_centos7/git/blob/master/21NOSQL/session.php
curl localhost/session.php //結果相似於1443702394<br><br>1443702394<br><br>i44nunao0g3o7vf2su0hnc5440
命令行鏈接redis，也能夠查看到該key以及對應的值
若是想用php鏈接redis cluster，須要使用predis擴展
安裝方法相似phpredis，predis擴展地址https://github.com/nrk/predis
.
主從配置
爲了節省資源，咱們能夠在一臺機器上啓動兩個redis服務
cp /etc/redis.conf /etc/redis2.conf
vim /etc/redis2.conf //須要修改port,dir,pidfile,logfile
還要增長一行
slaveof 127.0.0.1 6379
若是主上設置了密碼，還須要增長
masterauth aminglinux>com //設置主的密碼
啓動以前不要忘記建立新的dir目錄
redis-server /etc/redis2.conf
測試：在主上建立新的key，在從上查看
注意：redis主從和mysql主從不同，redis主從不用事先同步數據，它會自動同步過去
.
redis集羣
多個redis節點網絡互聯，數據共享
全部的節點都是一主一從（能夠是多個從），其中從不提供服務，僅做爲備用
不支持同時處理多個鍵（如mset/mget），由於redis須要把鍵均勻分佈在各個節點上，併發量很高的狀況下同時建立鍵值會下降性能並致使不可預測的行爲。
支持在線增長、刪除節點
客戶端能夠連任何一個主節點進行讀寫
場景設置：
兩臺機器，分別開啓三個Redis服務(端口)
A機器上三個端口7000,7002,7004，所有爲主
B機器上三個端口7001,7003,7005，所有爲從
兩臺機器上都要編譯安裝redis,而後編輯並複製3個不一樣的redis.conf，分別設置不一樣的端口號、dir等參數，還須要增長cluster相關參數，而後分別啓動6個redis服務
具體redis配置文件https://coding.net/u/aminglinux/p/yuanke_centos7/git/tree/master/21NOSQL 下載或者查看
安裝ruby2.2 （只須要一臺機器上運行）
yum -y groupinstall "Development Tools"
yum -y install gdbm-devel libdb4-devel libffi-devel libyaml libyaml-devel ncurses-devel openssl-devel readline-devel tcl-deve
cd /root/
mkdir -p rpmbuild/{BUILD,BUILDROOT,RPMS,SOURCES,SPECS,SRPMS}
wget http://cache.ruby-lang.org/pub/ruby/2.2/ruby-2.2.3.tar.gz -P rpmbuild/SOURCES
wget https://raw.githubusercontent.com/tjinjin/automate-ruby-rpm/master/ruby22x.spec -P rpmbuild/SPECS
rpmbuild -bb rpmbuild/SPECS/ruby22x.spec
yum -y localinstall rpmbuild/RPMS/x86_64/ruby-2.2.3-1.el7.centos.x86_64.rpm
gem install redis
cp /usr/local/src/redis-4.0.1/src/redis-trib.rb /usr/bin/
redis-trib.rb create --replicas 1 192.168.133.130:7000 192.168.133.130:7002 192.168.133.130:7004 192.168.133.132:7001 192.168.133.132:7003 192.168.133.132:7005
redis-cli -c -h 192.168.133.130 -p 7000//-c說明以集羣的方式登陸
任意一個節點均可以建立key，或者查看key（演示）
redis-trib.rb check 192.168.133.130:7000//檢測集羣狀態
cluster nodes//列出節點
cluster info//查看集羣信息
cluster meet ip port //添加節點
cluster forget node_id //移除某個節點
cluster replicate node_id//將當前節點設置爲指定節點的從
cluster saveconfig//保存配置文件