快取資料庫

NoSQL(NoSQL = Not Only SQL)，意即泛指非關系型資料庫，（關系型資料庫mysql，sqlite，oracle，即存在強烈的資料關系），是對不同于傳統的關系型資料庫的資料庫管理系統的統稱，NoSQL用于超大規模資料的存盤，（例如谷歌或Facebook每天為他們的用戶收集萬億位元的資料），這些型別的資料存盤不需要固定的模式，無需多余操作就可以橫向擴展，

SNS 指社交網路 social network society

NoSQL資料庫的四大類別

1. 鍵值（Key-Value）存盤資料

   這一類資料庫主要會使用到喲個哈希表，這個表中有一個特定的鍵和一個指標指向特定的資料，Key/values模型對于IT系統來叔的優勢在于簡單、一部書，但是如果DBA只對部分值進行查詢或更新的時候，Key/values的方法效率低

2. 列存盤資料：大資料用的多

   這部分資料庫通常是用來應對分布式存盤的海量資料，鍵仍然存在，但是它們的特點是指向了多個列，這些列是由列組來安排的

3. 檔案型資料庫

   檔案型資料庫的靈感是來自于Lotus Note辦公軟體的，而且它同第一種鍵值存盤相類似，該型別的資料模型是版本化的檔案，半結構化的檔案以特定的格式存盤，檔案型資料庫可以看成是鍵值資料庫的升級版，允許之間嵌套鍵值，而且檔案型資料庫比鍵值型資料庫的查詢效率更高

4. 圖形（Graph）資料庫

   圖形結構的資料庫同其他行列以及剛性結構的SQL資料庫不同，它是使用靈活的圖形模型，并且能夠擴展到多個服務器上，NoSQL資料庫沒有標準的查詢語言(SQL)，因此進行資料庫查詢需要制定資料模型，許多NoSQL資料庫都有REST式的資料介面或者查詢API，

總結：NoSQL資料庫在以下的這幾種情況下比較適用：1、資料模型比較簡單；2、需要靈活性更強的IT系統；3、對資料庫性能要求較高；4、不需要高度的資料一致性；5、對于給定key，比較容易映射復雜值的環境，

Redis快取資料庫：把資料存在記憶體中

redis的作用就是共享記憶體資料，而且redis比字典強大很多

Linux作業系統有七個終端，單原則上可以開啟無限個終端，只要系統夠強，

Redis下載與安裝

1.下載壓縮檔案：wget -c http://download.redis.io/releases/redis-4.0.6.tar.gz
2.解壓壓縮包：tar -zxvf redis-4.0.6.tar.gz
3.安裝到固定的檔案夾中：make PREFIX=/opt/redis409 install

redis的基本使用命令

redis的啟動命令 redis-server

查看是否啟動redis命令，查看埠6379是否被redis-server使用：ps -ef |grep redis

進入客戶端操作命令：redis-cli 退出命令：shutdown

Redis API使用

redis-py 的API的使用可以分類為：

• 連接方式
• 連接池
• 操作
  • String操作
  • Hash操作
  • Set操作
  • Sort Set 操作
• 管道
• 發布訂閱

redis的操作

help + 操作命令可以查看使用方式

1.String 字符操作：

redis中的String在記憶體中按照一個name對應一個value來存盤，

name          value
n1   -------> v1
n2   -------> v2
n3   -------> v3

進入資料庫：redis-cli

設定name：set name eric # name為鍵 ，eric是值

獲取name值：get name

修改name值：set name jing #直接在值的位置寫要修改的值就OK了

獲取所有的鍵：keys *

set（name，value，ex=None，px=None，nx=Flase，xx=False）引數設定：

? ex，過期時間（秒）

? px，過期時間（毫秒）

? nx，如果設定為True，則只有name不存在，當前set操作才執行

? xx，如果設定為True，則只有name存在時，當前set操作才執行

setnx（name，value）：設定值，只有name不存在時，執行設定操作（添加）

setex(name, value, time)：過期時間（數字秒 或 timedelta物件）

psetex(name,time_ms,value)：

mset（*args，**kwargs）批量設定值：批量設定值

? mset（'k1' : 'v1', 'k2' : 'v2'）或rget（{ 'k1' : 'v1' , 'k2' : 'v2' }）

get(name):獲取值

mget（keys，*args）：批量獲取值

getset（name,value）引數：沒有就設定，有就獲取（設定新值并獲取原來的值）

getrange（key,start,end）引數：執行切片操作

setrange（key,offset,value）引數：修改字串內容，從指定字串索引開始向后替換（新值太長時，則向后添加）

setbit（name, offset, value）：對name對應值的二進制表示的位進行操作

getbit (name，offset）：獲取name對應的值的二進制表示中的某位的值 （0或1）

bitcount(key, start=None, end=None)：# 獲取name對應的值的二進制表示中 1 的個數

strlen(name)：回傳name對應值的位元組長度（一個漢字3個位元組）

incr(self, name, amount=1)：自增 name對應的值，當name不存在時，則創建name＝amount，否則，則自增，

incrbyfloat(self, name, amount=1.0)：自增 name對應的值，當name不存在時，則創建name＝amount，否則，則自增，（浮點型）

decr(self, name, amount=1)：# 自減 name對應的值，當name不存在時，則創建name＝amount，否則，則自減，

append(key, value)：在redis name對應的值后面追加內容

2.Hash 哈希操作

hash表現形式上有些像python中的dict，可以存盤一組相關聯性較強的資料，redis中Hash在記憶體中的存盤形式

name              hash
n1   -----------> k1->v1
                  k2->v2
                  k3->v3
n2   -----------> k9->v99
                  kx->vx

hset(name, key, value)：# name對應的hash中設定一個鍵值對（不存在，則創建；否則，修改）

hmset (name, mapping)：# 在name對應的hash中批量設定鍵值對

hget (name, key): # 在name對應的hash中獲取根據key獲取value

hmget(name, keys, *args)：# 在name對應的hash中獲取多個key的值

hkeys (name)：# 獲取name對應的hash中所有的key的值

hgetall(name)：#獲取name對應hash的所有鍵值

hlen(name)：# 獲取name對應的hash中鍵值對的個數

hvals(name)：# 獲取name對應的hash中所有的value的值

hexists(name, key)：# 檢查name對應的hash是否存在當前傳入的key

hdel(name,*keys)：# 將name對應的hash中指定key的鍵值對洗掉

hincrby(name, key, amount=1)：# 自增name對應的hash中的指定key的值，不存在則創建key=amount

hincrbyfloat(name, key, amount=1.0)：# 自增name對應的hash中的指定key的值，不存在則創建key=amount

hscan(name, cursor=0, match=None, count=None)：增量式迭代獲取，對于資料大的資料非常有用，hscan可以實作分片的獲取資料，并非一次性將資料全部獲取完，從而放置記憶體被撐爆

hscan_iter(name, match=None, count=None)：# 利用yield封裝hscan創建生成器，實作分批去redis中獲取資料

3.list 串列操作

List操作，redis中的List在在記憶體中按照一個name對應一個List來存盤，

name        list
n1   -----> [v1,v2,...]
n2   -----> [v2,v33,...]

lpush(name,values)：# 在name對應的list中添加元素，每個新的元素都添加到串列的最左邊

lpushx(name,value)：# 在name對應的list中添加元素，只有name已經存在時，值添加到串列的最左邊

rpushx(name, value)：# 表示從右向左操作

llen(name)：# name對應的list元素的個數

linsert(name, where, refvalue, value))：# 在name對應的串列的某一個值前或后插入一個新值

r.lset(name, index, value)：# 對name對應的list中的某一個索引位置重新賦值

r.lrem(name, value, num)：# 在name對應的list中洗掉指定的值

lpop(name)：# 在name對應的串列的左側獲取第一個元素并在串列中移除，回傳值則是第一個元素

lindex(name, index)：在name對應的串列中根據索引獲取串列元素

lrange(name, start, end)：# 在name對應的串列分片獲取資料

ltrim(name, start, end)：# 在name對應的串列中移除沒有在start-end索引之間的值

rpoplpush(src, dst)：# 從一個串列取出最右邊的元素，同時將其添加至另一個串列的最左邊

blpop(keys, timeout)：# 將多個串列排列，按照從左到右去pop對應串列的元素

brpoplpush(src, dst, timeout=0)：# 從一個串列的右側移除一個元素并將其添加到另一個串列的左側

4.set集合操作

Set操作，Set集合就是不允許重復的串列

sadd(name,values)：# name對應的集合中添加元素

scard(name)：# 獲取name對應的集合中元素個數

sdiff(keys, *args)：# 在第一個name對應的集合中且不在其他name對應的集合的元素集合

sdiffstore(dest, keys, *args)：# 獲取第一個name對應的集合中且不在其他name對應的集合，再將其新加入到dest對應的集合中

sinter(keys, *args)：# 獲取多一個name對應集合的并集

sinterstore(dest, keys, *args)：# 獲取多一個name對應集合的并集，再講其加入到dest對應的集合中

sismember(name, value)：# 檢查value是否是name對應的集合的成員

smembers(name)：# 獲取name對應的集合的所有成員

smove(src, dst, value)：# 將某個成員從一個集合中移動到另外一個集合

spop(name)：# 從集合的右側（尾部）移除一個成員，并將其回傳

srandmember(name, numbers)：# 從name對應的集合中隨機獲取 numbers 個元素

srem(name, values)：# 在name對應的集合中洗掉某些值

sunion(keys, *args)：# 獲取多一個name對應的集合的并集

sunionstore(dest,keys, *args)：# 獲取多一個name對應的集合的并集，并將結果保存到dest對應的集合中

sscan(name, cursor=0, match=None, count=None)
sscan_iter(name, match=None, count=None)
# 同字串的操作，用于增量迭代分批獲取元素，避免記憶體消耗太大

有序集合，在集合的基礎上，為每元素排序；元素的排序需要根據另外一個值來進行比較，所以，對于有序集合，每一個元素有兩個值，即：值和分數，分數專門用來做排序，

zadd(name, *args, **kwargs)：# 在name對應的有序集合中添加元素

zcard(name)：# 獲取name對應的有序集合元素的數量

zcount(name, min, max)：# 獲取name對應的有序集合中分數 在 [min,max] 之間的個數

zincrby(name, value, amount)：# 自增name對應的有序集合的 name 對應的分數

r.zrange( name, start, end, desc=False, withscores=False, score_cast_func=float)：# 按照索引范圍獲取name對應的有序集合的元素

zrank(name, value)：# 獲取某個值在 name對應的有序集合中的排行（從 0 開始）

zrem(name, values)：# 洗掉name對應的有序集合中值是values的成員

zremrangebyrank(name, min, max)：# 根據排行范圍洗掉

zremrangebyscore(name, min, max)：# 根據分數范圍洗掉

zscore(name, value)：# 獲取name對應有序集合中 value 對應的分數

zinterstore(dest, keys, aggregate=None)：# 獲取兩個有序集合的交集，如果遇到相同值不同分數，則按照aggregate進行操作

zunionstore(dest, keys, aggregate=None)：# 獲取兩個有序集合的并集，如果遇到相同值不同分數，則按照aggregate進行操作

zscan(name, cursor=0, match=None, count=None, score_cast_func=float)
zscan_iter(name, match=None, count=None,score_cast_func=float)
# 同字串相似，相較于字串新增score_cast_func，用來對分數進行操作

其他常用操作

delete(*names)：# 根據洗掉redis中的任意資料型別

exists(name)：# 檢測redis的name是否存在

keys(pattern='*')：# 根據模型獲取redis的name

expire(name ,time)：# 為某個redis的某個name設定超時時間

rename(src, dst)：# 對redis的name重命名為

move(name, db))：# 將redis的某個值移動到指定的db下

randomkey()：# 隨機獲取一個redis的name（不洗掉）

type(name)：# 獲取name對應值的型別

scan(cursor=0, match=None, count=None)
scan_iter(match=None, count=None)
# 同字串操作，用于增量迭代獲取key

連接方式

1、操作模式

redis-py提供兩個類Redis和StrictRedis用于實作Redis的命令，StrictRedis用于實作大部分官方的命令，并使用官方的語法和命令，Redis是StrictRedis的子類，用于向后兼容舊版本的redis-py，

import redis
r = redis.Redis(host='10.211.55.4', port=6379)
r.set('foo', 'Bar')
print r.get('foo')

2、連接池

redis-py使用connection pool來管理對一個redis server的所有連接，避免每次建立、釋放連接的開銷，默認，每個Redis實體都會維護一個自己的連接池，可以直接建立一個連接池，然后作為引數Redis，這樣就可以實作多個Redis實體共享一個連接池，

標籤：NoSQL

上一篇：有點長的博客：Redis不是只有get set那么簡單

下一篇：求PB開發TSC條碼列印TSCLib.dll的例子，官方沒有PB的：（