python 基礎 10.0 nosql 簡介--redis 鏈接池及管道

時間 2019-12-11

標籤 python 基礎 10.0 nosql 簡介 redis 鏈接管道欄目 Python 简体版

原文原文鏈接

一. NOSQL 數據庫簡介

NoSQL 泛指非關係型的數據庫。非關係型數據庫與關係型數據庫的差異

非關係型數據庫的優點：

1.性能NOSQL 是基於鍵值對的，能夠想象成表中的主鍵和值的對應關係，並且不須要通過SQL 層的解析，因此性能很是高。

2.可擴展性一樣也是由於基於鍵值對，數據之間沒有耦合性，因此很是容易水平擴展。

關係型數據庫的優點：

1. 複雜查詢能夠用SQL語句方便的在一個表以及多個表之間作很是複雜的數據查詢。

2.事務支持使得對於安全性能很高的數據訪問要求得以實現。對於這兩類數據庫，對方的優點就是本身的弱勢。反之亦然。可是近年來這兩種數據庫都在向着另一個方向進化。例如：NOSQL 數據庫慢慢開始具有SQL 數據庫的一些複雜查詢功能的雛形，好比 Couchbase 的index 以及 MONGO 的複雜查詢。對於事務的支持也能夠用一些系統級的原子操做來實現例如樂觀鎖之類的方法來曲線救國。SQL 數據庫也開始慢慢進化，好比 HandlerSocker 技術的實現，能夠在MYSQL上實現對於SQL 層的穿透，用NOSQL 的方式訪問數據庫，性能能夠上達到甚至超越NOSQL 數據庫。可擴展性上例如Percona Server ，能夠實現無中心化的集羣。雖然這兩級都由於各自的弱勢而開始進化出另外一極的一些特徵性，可是這些特性的增長也會消弱其原本具有的優點，好比Couchbase上的index 的增長會逐步下降數據庫的讀寫性能。因此構建系統的短時間和長期存儲策略，用好他們各自的強項是架構師須要好好考慮的重要問題。

二. python 操做 redis

redis 的概念：

redis 是一個key-value 存儲系統。和Memcached 相似，它支持存儲的value類型相對更多，包括string ，list，set（集合），zset（sorted set --有序集合）和hash（哈希類型）。這些數據類型都支持 push/pop add/remove 及取交際並集和差集更豐富的操做，並且這些操做都是原子性的。在此基礎上，redis支持各類不一樣方式的排序。與memcached同樣，爲了保證效率，數據都是緩存在內存中。區別的是redis 會週期性的把更新的數據寫入磁盤或者把修改操做寫入追加的記錄文件，而且在此基礎上實現了master-slave（主從）同步。

Redis 是一個高性能的key-value 數據庫。redis 的出現，很大程度補償了memcached 這類 key/value 存儲的不足，在部分場合能夠對關係數據庫起到很好的補充做用。

Readis 支持主從同步。數據能夠從主服務器向任意數量的從服務器上同步，從服務器能夠是關聯其餘從服務器的主服務器。這使得Redis 可執行單層樹複製。存盤能夠有意無心的對數據進行寫操做。因爲徹底實現了發佈/訂閱機制，使得從數據庫在任何地方同步樹時，可訂閱一個頻道並接收主服務器完整的消息發佈記錄。同步對讀取操做的可擴展性和數據冗餘頗有幫助。

三. Redis 的搭建

見本博客地址： http://www.cnblogs.com/lzcys8868/p/7532873.html

或以下進行簡易安裝redis

#cd /usr/local/src

#wget http://download.redis.io/releases/redis-3.0.1.tar.gz

#tar xzf redis-3.0.1.tar.gz

#cd redis-3.0.1

#make

#更改redis.conf 把 daemonize no 更改成 daemonize yes 。能夠後臺啓動

#src/redis-server & 或 src/redis-server + redis.conf 配置文件路徑

檢查redis是否正常啓動

Ps –ef |grep redis

Netstat –lnp |grep 6379

四 linux 上 redis 客戶端安裝

pip install redis

五. redis 的簡單操做

#/usr/bin/python

#-*- coding:utf-8 -*-

#@Time :2017/11/26 21:06

#@Auther :liuzhenchuan

#@File :redis 安裝.py

#pycharm 安裝redis 只需導入redis模塊

import redis

##一. redis 簡單操做

#方法一，鏈接redis。及插入數據

redis_config = {

'host':'192.168.16.70',

'port':6379

}

r = redis.Redis(**redis_config)

#set 操做第一個參數就是key 第二個參數就是value

r.set('liu','you are very good')

# r.keys 就是獲取到全部的keys

print (r.keys())

# r.get 就是獲取到key的值

print r.get('liu')

# 鏈接redis ，方法二

r = redis.Redis(host='192.168.16.70',port=6379)

##二. redis 鏈接池

print '##'*5 + 'redis 鏈接池' + '##'*5

def get_redis_connect():

redis_config = {

'host': '192.168.16.70',

'port': 6379

}

pool = redis.ConnectionPool(**redis_config)

r = redis.Redis(connection_pool=pool)

return r

if __name__ == '__main__':

r = get_redis_connect()

r.set('name','lzc')

r.set('age','18')

print r.get('name')

print r.get('age')

print r.keys()

>>>

##########redis 鏈接池##########

lzc

['name', 'liu', 'age']

六. redis 的管道

##能夠一次執行屢次redis 命令

管道：

redis-py 默認在執行每次請求都會建立（鏈接池申請鏈接）和斷開（歸還鏈接池）一次鏈接操做，若是想要在一次請求中指定多個命令，則可使用pipline 實現一次請求指定多個命令，而且默認狀況下一次pipline 是原子性操做。減小功耗redis是一個cs模式的tcp server，使用和http相似的請求響應協議。一個client能夠經過一個socket鏈接發起多個請求命令。每一個請求命令發出後client一般會阻塞

並等待redis 服務處理，redis 處理完成後請求命令後會將結果經過相應報文返回給client。

七. 應用管道與不該用管道的時間差爲10倍

#/usr/bin/python

#-*- coding:utf-8 -*-

#@Time :2017/11/26 23:39

#@Auther :liuzhenchuan

#@File :redis 管道.py

import datetime

import redis

def withpipe(r):

pipe = r.pipeline(transaction=True)

for i in xrange(1, 1000):