主頁 > 資料庫 > Redis系列(一)Redis入門

Redis系列(一)Redis入門

2020-09-10 19:11:59 資料庫

NoSQL 開發中或多或少都會用到,也是面試必問知識點,最近這幾天的面試每一場都問到了,但是感徑訓答的并不好,還有很多需要梳理的知識點,這里通過幾篇 Redis 筆記整個梳理一遍,后面再加上面試題,

Redis 系列:

  1. Redis系列(一)Redis入門
  2. Redis系列(二)Redis的8種資料型別
  3. Redis系列(三)Redis的事務和Spring Boot整合
  4. Redis系列(四)Redis組態檔和持久化
  5. Redis系列(五)發布訂閱模式、主從復制和哨兵模式
  6. Redis系列(六)Redis 的快取穿透、快取擊穿和快取雪崩
  7. Redis系列(七)Redis面試題
  8. Redis命令參考

1、什么是 NoSQL

NoSQL = Not Only SQL(不僅僅是 SQL)

關系型資料庫:表格,行,列

泛指非關系型資料庫的,隨著 web 2.0 互聯網的誕生!傳統的關系型資料庫很難對付 web 2.0 時代!尤其是超大規模的高并發的社區!暴露出來很多難以克服的問題 NoSQL 在當今大資料環境下發展的十分迅速,Redis 是發展最快,而且是我們當下必須要掌握的一個技術!

很多的資料型別比如用戶的個人資訊,社交網路,地理位置,這些資料型別的存盤不需要一個固定的格式!不需要多余的操作就可以橫向擴展的,Map<String, Object> 使用鍵值對來控制,

NoSQL 的特點

1、方便擴展(資料之間沒有關系,很好擴展)

2、大資料量高性能(Redis一秒寫8萬次,讀取 11 萬次,NoSQL的快取記錄級,是一種細粒度的快取,性能會比較高)

3、資料型別是多樣型的(不需要事先設計資料庫,隨取隨用)

傳統 RDBMS 和 NoSQL的比較

傳統的 RDBS
- 結構化組織
- SQL
- 資料和關系都存在單獨的表中
- 操作語言,資料庫定義語言
- 嚴格的一致性
- 基礎的事務
- ...
NoSQL
- 不僅僅是資料
- 沒有固定的查詢語言
- 鍵值對存盤,列存盤,檔案存盤,圖形資料庫
- 最終一致性
- CAP 定理和 BASE (異地多活)
- 高性能,高可用,高可擴

2、NoSQL 的四大分類

KV 鍵值對:Redis

檔案型資料庫(bson 和 json 一樣):

  • MongoDB:
    • MongoDB 是一個基于分布式檔案儲存的資料庫,使用 C++撰寫,主要用來處理大量的檔案,
    • MongoDB 是一個介于關系型資料庫和非關系型資料中間的產品!MongoDB 是非關系型資料中功能最豐富,最像關系型資料庫的,
  • ConthDB

列存盤資料庫:

  • HBase
  • 分布式檔案系統

圖關系資料庫:

  • 他不是存圖形,放的是關系,比如:朋友圈社交網路,廣告推薦
  • Neo4j、InfoGrid

3、Redis 入門

Redis (Remote Dictionary Server),即遠程字典服務!

是一個開源的使用 ANSI C語言撰寫、支持網路、可基于記憶體亦可持久刷的日志型、key-value 資料庫,并提供多種語言的 API,免費和開源!是當下最熱門的NoSQL 技術之一,也被人們稱之為機構化資料庫,

Redis 的作用

1、記憶體存盤、持久化(RDB 和 AOF)

2、效率高,可以用于高速快取

3、發布訂閱系統

4、地圖資訊分析

5、計數器、計時器(比如瀏覽量)

Redis 的特征:

1、多樣化的資料型別

2、持久化

3、集群

4、事務

Redis 官網: https://redis.io/

Redis 中文網: http://www.redis.cn/

4、Redis 安裝啟動

到官網下載壓縮包,上傳到服務器

[root@itzhouc opt]# ll
-rw-r--r-- 1 root root 2002463 Apr 29 00:18 redis-5.0.8.tar.gz
[root@itzhouc opt]# tar -zxvf redis-5.0.8.tar.gz 		# 解壓
[root@itzhouc redis-5.0.8]# yum install gcc-c++			# 增加環境支持
[root@itzhouc redis-5.0.8]# make					   # 安裝
[root@itzhouc redis-5.0.8]# make install
[root@itzhouc redis-5.0.8]# cd /usr/local/bin		    # 進入Redis的默認安裝目錄
[root@itzhouc bin]# ls
jemalloc-config  jeprof            luajit        mcrypt    redis-benchmark  redis-check-rdb  redis-sentinel
jemalloc.sh      libmcrypt-config  luajit-2.0.4  mdecrypt  redis-check-aof  redis-cli        redis-server

拷貝組態檔:

[root@itzhouc bin]# mkdir kconfig
[root@itzhouc bin]# cp /opt/redis-5.0.8/redis.conf kconfig/
[root@itzhouc bin]# cd kconfig/
[root@itzhouc kconfig]# ls
redis.conf

修改組態檔為后臺啟動:

[root@itzhouc kconfig]# pwd
/usr/local/bin/kconfig
[root@itzhouc kconfig]# vim redis.conf 

修改配置項:

  • daemonizeyes

  • 注釋掉 bind 127.0.0.1

  • 修改protected-mode no

啟動 Redis

[root@itzhouc bin]# ls
jemalloc-config  jeprof   libmcrypt-config  luajit-2.0.4  mdecrypt         redis-check-aof  redis-cli       redis-server
jemalloc.sh      kconfig  luajit            mcrypt        redis-benchmark  redis-check-rdb  redis-sentinel
[root@itzhouc bin]# redis-server kconfig/redis.conf #通過特定的組態檔啟動Redis
8178:C 29 Apr 2020 08:43:40.043 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo
8178:C 29 Apr 2020 08:43:40.043 # Redis version=5.0.8, bits=64, commit=00000000, modified=0, pid=8178, just started
8178:C 29 Apr 2020 08:43:40.043 # Configuration loaded

使用客戶端連接和測驗:

[root@itzhouc bin]# redis-cli -p 6379 
127.0.0.1:6379> ping
PONG
127.0.0.1:6379> set name test
OK
127.0.0.1:6379> get name
"test"
127.0.0.1:6379> 

查看 Redis 行程:再開一個視窗

[root@itzhouc ~]# ps -ef|grep redis
root      8179     1  0 08:43 ?        00:00:00 redis-server 127.0.0.1:6379
root      8210  3437  0 08:44 pts/1    00:00:00 redis-cli -p 6379
root      8306  8281  0 08:48 pts/2    00:00:00 grep --color=auto redis

退出Redis:

127.0.0.1:6379> shutdown		# 關閉Redis 
not connected> exit				# 退出
[root@itzhouc bin]# ps -ef|grep redis
root      8330  3437  0 08:49 pts/1    00:00:00 grep --color=auto redis
[root@itzhouc bin]# 

后面可能會用到單機多 Redis 啟動集群測驗,

5、Redis 性能測驗

redis-benchmark 是官網自帶的壓力測驗工具,

序號 選項 描述 默認值
1 -h 指定服務器主機名 127.0.0.1
2 -p 指定服務器埠 6379
3 -s 指定服務器 socket
4 -c 指定并發連接數 50
5 -n 指定請求數 10000
6 -d 以位元組的形式指定 SET/GET 值的資料大小 2
7 -k 1=keep alive 0=reconnect 1
8 -r SET/GET/INCR 使用隨機 key, SADD 使用隨機值
9 -P 通過管道傳輸 請求 1
10 -q 強制退出 redis,僅顯示 query/sec 值
11 --csv 以 CSV 格式輸出
12 -l 生成回圈,永久執行測驗
13 -t 僅運行以逗號分隔的測驗命令串列,
14 -I Idle 模式,僅打開 N 個 idle 連接并等待,

使用方式:

# 測驗 100 個并發連接,100000 個請求
redis-benchmark -h localhost -p 6379 -c 100 -n 100000

分析舉例:

====== SET ======
  100000 requests completed in 1.97 seconds		  # 對 10萬個請求進行寫入測驗
  100 parallel clients							# 100 個并發客戶端 
  3 bytes payload								# 每次寫入 3 個位元組
  keep alive: 1									# 只有一臺服務器來處理這些請求,即單機性能

19.56% <= 1 milliseconds
98.70% <= 2 milliseconds
99.82% <= 3 milliseconds
99.85% <= 9 milliseconds
99.94% <= 10 milliseconds
99.95% <= 126 milliseconds
99.96% <= 127 milliseconds
100.00% <= 127 milliseconds					# 所有請求在127 毫秒處理完成
50761.42 requests per second				# 每秒處理 50761.42 個請求

6、基礎知識

Redis 默認有 16 個資料庫,這個可以在組態檔中查看,

[root@itzhouc bin]# vim kconfig/redis.conf 

# Set the number of databases. The default database is DB 0, you can select
# a different one on a per-connection basis using SELECT <dbid> where
# dbid is a number between 0 and 'databases'-1
databases 16

默認使用的是第 0 個,

使用 select 命令切換資料庫,使用 dbsize查看資料庫大小:

[root@itzhouc bin]# redis-cli -p 6379
127.0.0.1:6379> ping
PONG
127.0.0.1:6379> select 3		# 切換資料庫
OK
127.0.0.1:6379[3]> dbsize		# 查看資料庫大小
(integer) 0
127.0.0.1:6379[3]> set name jack
OK
127.0.0.1:6379[3]> dbsize
(integer) 1
127.0.0.1:6379[3]> 

查看資料庫中所有的key

127.0.0.1:6379[3]> keys *
1) "name"
127.0.0.1:6379[3]> 

清除當前資料庫:

127.0.0.1:6379[3]> flushdb
OK
127.0.0.1:6379[3]> keys *
(empty list or set)

清除所有資料庫:

127.0.0.1:6379> flushall
OK
127.0.0.1:6379> keys *
(empty list or set)

7、Redis 是單執行緒的什么這么快(面試題)

Redis 是很快的,官方表示,Redis 是基于記憶體操作,CPU 不是 Redis 的性能瓶頸,Redis 的性能瓶頸是機器的記憶體和網路帶寬,既然可以單執行緒來實作,就使用單執行緒,

Redis 是 C 語言寫的,官方提供的資料為 100000+ 的 QPS ,完全不比同樣是使用 key-value 的Memecache 差,

Redis 為什么單執行緒還這么快呢?

1、誤區1:高性能的服務器一定是多線性的?

2、誤區2:多執行緒一定比單執行緒的效率高?

要了解在執行效率上 CPU > 記憶體 > 硬碟

核心:Redis 是將所有的資料全部放在記憶體中的,所有說使用單執行緒去操作執行效率就是最高的,多執行緒在執行程序中需要進行 CPU 的背景關系切換,這個是耗時操作,對于記憶體系統來說,如果沒有背景關系切換效率就是最高的,多次讀寫都是在一個 CPU 上的,在記憶體情況下,這個就是最佳方案,

redis 采用網路IO多路復用技術來保證在多連接的時候, 系統的高吞吐量, 參考文章

下一篇筆記將介紹 Redis 的五大資料型別和三個特殊型別,

轉載請註明出處,本文鏈接:https://www.uj5u.com/shujuku/3169.html

標籤:NoSQL

上一篇:【趙強老師】在MongoDB中使用游標

下一篇:Redis系列(二)Redis的8種資料型別

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • GPU虛擬機創建時間深度優化

    **?桔妹導讀:**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題,由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視,實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶,一 ......

    uj5u.com 2020-09-10 06:09:13 more
  • 可編程網卡芯片在滴滴云網路的應用實踐

    **?桔妹導讀:**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高,采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐,遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......

    uj5u.com 2020-09-10 06:10:21 more
  • 滴滴資料通道服務演進之路

    **?桔妹導讀:**滴滴資料通道引擎承載著全公司的資料同步,為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加,資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程,遇到的問題以及今后的規劃。 #1. 背景 資料,對于任何一家互聯網公司來說都是非常重要的資產,公司的大資料 ......

    uj5u.com 2020-09-10 06:11:05 more
  • 滴滴AI Labs斬獲國際機器翻譯大賽中譯英方向世界第三

    **桔妹導讀:**深耕人工智能領域,致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎,這次獲獎的專案是什么呢?一起來看看詳細報道吧! 近日,由國際計算語言學協會ACL(The Association for Computational Linguistics)舉辦的世界最具影響力的機器 ......

    uj5u.com 2020-09-10 06:11:29 more
  • MPP (Massively Parallel Processing)大規模并行處理

    1、什么是mpp? MPP (Massively Parallel Processing),即大規模并行處理,在資料庫非共享集群中,每個節點都有獨立的磁盤存盤系統和記憶體系統,業務資料根據資料庫模型和應用特點劃分到各個節點上,每臺資料節點通過專用網路或者商業通用網路互相連接,彼此協同計算,作為整體提供 ......

    uj5u.com 2020-09-10 06:11:41 more
  • 滴滴資料倉庫指標體系建設實踐

    **桔妹導讀:**指標體系是什么?如何使用OSM模型和AARRR模型搭建指標體系?如何統一流程、規范化、工具化管理指標體系?本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標,系統化的組織起來,通 ......

    uj5u.com 2020-09-10 06:12:52 more
  • 單表千萬行資料庫 LIKE 搜索優化手記

    我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索,LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料,可以使用下面的 SQL 陳述句: SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......

    uj5u.com 2020-09-10 06:13:25 more
  • 滴滴Ceph分布式存盤系統優化之鎖優化

    **桔妹導讀:**Ceph是國際知名的開源分布式存盤系統,在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統, ......

    uj5u.com 2020-09-10 06:14:51 more
  • es~通過ElasticsearchTemplate進行聚合~嵌套聚合

    之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章,這一次主要寫一個嵌套的聚合,例如先對sex集合,再對desc聚合,最后再對age求和,共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by,avg,sum等函式,Aggregation ......

    uj5u.com 2020-09-10 06:14:59 more
  • 爬蟲日志監控 -- Elastc Stack(ELK)部署

    傻瓜式部署,只需替換IP與用戶 導讀: 現ELK四大組件分別為:Elasticsearch(核心)、logstash(處理)、filebeat(采集)、kibana(可視化) 下載均在https://www.elastic.co/cn/downloads/下tar包,各組件版本最好一致,配合fdm會 ......

    uj5u.com 2020-09-10 06:15:05 more
最新发布
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取? 快取就是資料交換的緩沖區(稱作Cache),是存盤資料的臨時地方,一般讀寫性能較高。 快取的作用: 降低后端負載 提高讀寫效率,降低回應時間 快取的成本: 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下,當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:33:24 more
  • MySQL中binlog備份腳本分享

    關于MySQL的二進制日志(binlog),我們都知道二進制日志(binlog)非常重要,尤其當你需要point to point災難恢復的時侯,所以我們要對其進行備份。關于二進制日志(binlog)的備份,可以基于flush logs方式先切換binlog,然后拷貝&壓縮到到遠程服務器或本地服務器 ......

    uj5u.com 2023-04-20 08:28:06 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼: 發送驗證碼的介面為:http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式:PO ......

    uj5u.com 2023-04-20 08:27:27 more
  • 快取與資料庫雙寫一致性幾種策略分析

    本文將對幾種快取與資料庫保證資料一致性的使用方式進行分析。為保證高并發性能,以下分析場景不考慮執行的原子性及加鎖等強一致性要求的場景,僅追求最終一致性。 ......

    uj5u.com 2023-04-20 08:26:48 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼,對其進行一對一優化,而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題,盡量不要讓一個事務拖太長的時間 例如檔案上傳時,應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:26:35 more
  • 云時代,MySQL到ClickHouse資料同步產品對比推薦

    ClickHouse 在執行分析查詢時的速度優勢很好的彌補了MySQL的不足,但是對于很多開發者和DBA來說,如何將MySQL穩定、高效、簡單的同步到 ClickHouse 卻很困難。本文對比了 NineData、MaterializeMySQL(ClickHouse自帶)、Bifrost 三款產品... ......

    uj5u.com 2023-04-20 08:26:29 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼,對其進行一對一優化,而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題,盡量不要讓一個事務拖太長的時間 例如檔案上傳時,應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:25:13 more
  • Redis 報”OutOfDirectMemoryError“(堆外記憶體溢位)

    Redis 報錯“OutOfDirectMemoryError(堆外記憶體溢位) ”問題如下: 一、報錯資訊: 使用 Redis 的業務介面 ,產生 OutOfDirectMemoryError(堆外記憶體溢位),如圖: 格式化后的報錯資訊: { "timestamp": "2023-04-17 22: ......

    uj5u.com 2023-04-20 08:24:54 more
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取? 快取就是資料交換的緩沖區(稱作Cache),是存盤資料的臨時地方,一般讀寫性能較高。 快取的作用: 降低后端負載 提高讀寫效率,降低回應時間 快取的成本: 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下,當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:24:03 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼: 發送驗證碼的介面為:http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式:PO ......

    uj5u.com 2023-04-20 08:23:11 more