主頁 > 資料庫 > 說說 Redis 事務

說說 Redis 事務

2022-10-29 08:26:19 資料庫

更多技術文章,請關注我的個人博客 www.immaxfang.com 和小公眾號 Max的學習札記

Redis 事務簡介

Redis 只是提供了簡單的事務功能,其本質是一組命令的集合,事務支持一次執行多個命令,在事務執行程序中,會順序執行佇列中的命令,其他客戶端提交的命令請求不會插入到本事務執行命令序列中,命令的執行程序是順序執行的,但不能保證原子性,無法像 MySQL 那樣,有隔離級別,出了問題之后還能回滾資料等高級操作,后面會詳細分析,

Redis 事務基本指令

Redis 提供了如下幾個事務相關的基礎指令,

  • MULTI開啟事務,Redis 會將后續命令加到佇列中,而不真正執行它們,直到后續使用EXEC來原子化的順序執行這些命令
  • EXEC執行所有事務塊內的命令
  • DISCARD取消事務,放棄執行事務塊內所有的命令
  • WATCH監視一個或多個 key,若事務在執行前,這些 key 被其他命令修改,則事務被終端,不會執行事務中的任何命令
  • UNWATCH取消 WATCH命令對所有 keys 的監視

一般情況下,一個簡單的 Redis 事務主要分為如下幾個部分:

  1. 執行命令MULTI開啟一個事務,
  2. 開啟事務之后,執行命令的多個命令會依次被放入一個佇列,放入成功則會回傳QUEUED訊息,
  3. 執行命令EXEC提交事務,Redis 會依次執行佇列中的命令,并依次回傳所有命令的結果,(若想放棄提交事務,則執行DISCARD),

下圖簡單介紹了下 Redis 事務執行的程序:
image.png

實體分析

下面我們來通過一些實際具體例子,來體會下 Redis 中的事務,前面我們也說到 Redis 的事務不是正真的事務,是無法完全滿足標準事務的ACID特性的,通過下面的例子,我們來看看,Redis 的“破產版”事務到底存在什么問題,

  • [A]正常執行提交
127.0.0.1:6379> MULTI
OK
127.0.0.1:6379> SET a 1
QUEUED
127.0.0.1:6379> SET b 2
QUEUED
127.0.0.1:6379> EXEC
1) OK
2) OK
127.0.0.1:6379> GET a
"1"
127.0.0.1:6379> GET b
"2"

開啟事務后,提交的命令都會加入佇列(QUEUED),執行 EXEC 后會逐步執行命令并回傳結果,這個看起來是不是和我們平時使用 MySQL 的事務操作相似,類似 start transaction 和 commit,

  • [B]正常取消事務
127.0.0.1:6379> MULTI
OK
127.0.0.1:6379> SET a 1
QUEUED
127.0.0.1:6379> SET b 2
QUEUED
127.0.0.1:6379> DISCARD
OK
127.0.0.1:6379> 
127.0.0.1:6379> GET a
(nil)
127.0.0.1:6379> GET b
(nil)

開啟事務后,若不想繼續事務,使用 DISCARD 取消,前面提交的命令并不會真正執行,相關的 key 值不變,這個看起來也和 MySQL 的事務相似,類似 start transaction 和 rollback,

  • [C]WATCH 監視 key
-- 執行緒 1 中執行
127.0.0.1:6379> del a
(integer) 1
127.0.0.1:6379> get a
(nil)
127.0.0.1:6379> SET a 0
OK
127.0.0.1:6379> WATCH a
OK
127.0.0.1:6379> MULTI
OK
127.0.0.1:6379> SET a 1
QUEUED
----------------------------------------- 執行緒 2 中執行
----------------------------------------- 127.0.0.1:6379> SET a 2
----------------------------------------- OK
127.0.0.1:6379> EXEC
(nil)
127.0.0.1:6379> GET a
"2"

在開啟事務之前 WATCH 了 a 的值,隨后再開啟事務,在另一個執行緒中設定了 a 的值(SET a 2),然后再 EXEC 執行事務,結果為 nil,
說明事務沒有被執行,因為 a 的值在 WATCH 之后發生了變化,所以事務被取消了,

需要注意的是,這里和開啟事務的時間點沒有關系,與 MULTI 和另一個執行緒設定 a 的值的先后沒有關系,只要是在 WATCH 之后發生了變化,無論事務是否已經開啟,執行事務(EXEC)的時候都會取消,
普通情況下,在執行 EXEC 和 DISCARD 命令時,都會默認執行 UNWATCH,

  • [D]語法錯誤
127.0.0.1:6379> SET a 1
OK
127.0.0.1:6379> SET b 2
OK
127.0.0.1:6379> MULTI
OK
127.0.0.1:6379> SET a 11
QUEUED
127.0.0.1:6379> SETS b 22
(error) ERR unknown command 'SETS'
127.0.0.1:6379> EXEC
(error) EXECABORT Transaction discarded because of previous errors.
127.0.0.1:6379> GET a
"1"
127.0.0.1:6379> GET b
"2"

當 Redis 開啟一個事務后,若添加的命令中有語法錯誤,會導致事務提交失敗,這種情況下事務佇列中的命令都不會被執行,如上面例子中 a 和 b 的值都是原有的值,
這類在 EXEC 之前產生的錯誤,如命令名稱錯誤,命令引數錯誤等,會在 EXEC 執行之前被檢測出來,所以在發生這些錯誤的時候,事務會被取消,事務中的所有命令都不會執行,(這種情況看起來是不是有點像回滾了)

  • [E]運行時錯誤
127.0.0.1:6379> MULTI
OK
127.0.0.1:6379> SET a 1
QUEUED
127.0.0.1:6379> SET b hello
QUEUED
127.0.0.1:6379> INCR b
QUEUED
127.0.0.1:6379> EXEC
1) OK
2) OK
3) (error) ERR value is not an integer or out of range
127.0.0.1:6379> GET a
"1"
127.0.0.1:6379> GET b
"hello"

當 Redis 開啟一個事務后,添加的命令沒有出現前面說的語法錯誤,但是在運行時檢測到了型別錯誤,導致事務最提交失敗(說未完全成功可能更準確點),此時事務并不會回滾,而是跳過錯誤命令繼續執行,
如上面的例子,未報錯的命令值已經修改,a 被設定成了 1,b 被設定為了 hello,但是報錯的值未被修改,即 INCR b 型別錯誤,并未執行,b 的值也沒有被再更新,

Redis 事務與 ACID

通過上面的例子,我們已經知道 Redis 的事務和我們通常接觸的 MySQL 等關系資料庫的事務還有有一定差異的,它不保證原子性,同時 Redis 事務也沒有事務隔離級別的概念,下面我們來具體看下 Redis 在 ACID 四個特性中,那些是滿足的,那些是不滿足的,
事務執行可以分為命令入隊(EXEC 執行前)和命令實際執行(EXEC 執行之后)兩個階段,下面我們在分析的時候,很多時候都會分這兩種情況來分析,

  • 原子性(A)

上面的實體分析中,[A],[B],[C]三種正常的情況,我們可以很明顯的看出,是保證了原子性的
但是一些例外情況下,是不滿足原子性的,

  1. 如 [D] 所示的情況,客戶端發送的命令有語法錯誤,在命令入佇列時 Redis 就判斷出來了,等到執行 EXEC 命令時,Redis 就會拒絕執行所有提交的命令,回傳事務失敗的結果,此種情況下,事務中的所有命令都不會被執行了,是保證了原子性的
  2. 如 [E] 所示的情況,事務操作入隊時,命令和操作型別不匹配,此時 Redis 沒有檢查出錯誤(這類錯誤是運行時錯誤),等到執行 EXEC 命令后,Redis 實際執行這些命令操作時,就會報錯,需要注意的是,雖然 Redis 會對錯誤的命令報錯不執行,但是其余正確的命令會依次執行完,此種情況下,是無法保證原子性的
  3. 在執行事務的 EXEC 命令時,Redis 實體發生了故障,導致事務執行失敗,此時,如果開啟了 AOF 日志,那么只會有部分事務操作被記錄到 AOF 日志中,使用redis-check-aof工具檢測 AOF 日志檔案,可以把未完成的事務操作從 AOF 檔案中去除,這樣一來,使用 AOF 檔案恢復實體后,事務操作不會被再執行,從而保證了原子性,若使用的 RDB 模式,最新的 RDB 快照是在 EXEC 執行之前生成的,使用快斬訓復之后,事務中的命令也都沒有執行,從而保證了原子性,若 Redis 沒有開啟持久化,則重啟后記憶體中的資料全部丟失,也就談不上原子性了,
  • 一致性(C)

一致性指的是事務執行前后,資料符合資料庫的定義和要求,這點在 Redis 事務中是滿足的,不論是發生語法錯誤還是運行時錯誤,錯誤的命令均不會被執行,

  1. EXEC 執行之前,入隊報錯(實體分析中的語法錯誤)

事務會放棄執行,故可以保證一致性,

  1. EXEC 執行之后,實際執行時報錯(實體分析中的運行時錯誤)

錯誤的命令不會被執行,正確的命令被執行,一致性可以保證,

  1. EXEC 執行時,實體宕機

若 Redis 沒有開啟持久化,實體宕機重啟后,資料都沒有了,資料是一致的,
若配置了 RDB 方式,RDB 快照不會在事務執行時執行,所以,若事務執行到一半,實體發生了故障,此時上一次 RDB 快照中不會包含事務所做的修改,而下一次 RDB 快斬訓沒有執行,實體重啟后,事務修改的資料會丟失,資料是一致的,若事務已經完成,但新一次的 RDB 快斬訓沒有生成,那事務修改的資料也會丟失,資料也是一致的,
若配置了 AOF 方式,當事務操作還沒被記錄到 AOF 日志時,實體就發生故障了,使用 AOF 日志恢復后資料是一致的,若事務中的只有部分操作被記錄到 AOF 日志,可以使用 redis-check-aof清除事務中已經完成的操作,資料庫恢復后資料也是一致的,

  • 隔離性(I)
    1. 并發操作在 EXEC 執行前,隔離性需要通過 WATCH 機制來保證
    2. 并發操作在 EXEC 命令之后,隔離性可以保證

情況 a 可以參考前面的實體分析 WATCH 命令的使用,
情況 b,由于 Redis 是單執行緒執行命令,EXEC 命令執行后,Redis 會保證先把事務佇列中的所有命令執行完之后再執行之后的命令,

  • 持久性(D)

若 Redis 沒有開啟持久化,那么就是所有資料都存盤在記憶體中,一旦重啟,資料就會丟失,因此此時事務的持久性是肯定無法得到保證的,
若 Redis 開啟了持久化,當實體宕機重啟,還是會有可能丟失資料,因此也并能完全保證持久性,
因此,我們可以說 Redis 事務無法一定保證持久性,僅在特殊的情況下,可以保證持久性,

關于 Redis 在開啟持久化之后,為啥還會丟失資料,筆者會單獨整理一篇 Redis 持久化與主從相關的文章來介紹,此處簡單說下,
如果配置了 RDB 模式,在一個事務執行后,下一次 RDB 快斬訓未執行前,Redis 實體發生了宕機,資料就會丟失、
如果配置了 AOF 模式,而 AOF 模式的三種配置選項 no,everysec,always 也都可能會產生資料丟失的情況,

總結一下,Redis 事務對 ACID 的支持情況:

  • 具備一定的原子性,但不支持回滾
  • 滿足一致性
  • 滿足隔離性
  • 無法保證持久性

Redis 事務為什么不支持回滾

看一下官網的的說明:

What about rollbacks?
Redis does not support rollbacks of transactions since supporting rollbacks would have a significant impact on the simplicity and performance of Redis.

image.png
大部分需要事務回滾的情況是程式錯誤導致的,這種情況一般是開發環境,生產環境不應該出現這種錯誤,
對于邏輯錯誤,例如應該加 1,結果寫成了加 2,這種情況無法通過回滾來解決,
Redis 追求的是簡單高效,而傳統事務的實作相對復雜很多,這和 Redis 的設計思想是違背的,當我們享受 Redis 的快速時,也就無法再要求它更多,

總結

本文主要介紹了 Redis 事務的基礎指令與執行流程,并分析了其對傳統 ACID 特性支持的情況,相信大家對 Redis 事務已經有了一個簡單的了解,
通過上面的介紹,會發現 Redis 的事務似乎有點雞肋,確實實際中也很少會使用,至于事務的具體實作,筆者后續文章會結合原始碼進行分析,今天的文章就到這里,下期我們接著學,

轉載請註明出處,本文鏈接:https://www.uj5u.com/shujuku/522999.html

標籤:其他

上一篇:云小課|MRS基礎原理之Hudi介紹

下一篇:所有FlutterWeb應用程式都已損壞

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • GPU虛擬機創建時間深度優化

    **?桔妹導讀:**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題,由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視,實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶,一 ......

    uj5u.com 2020-09-10 06:09:13 more
  • 可編程網卡芯片在滴滴云網路的應用實踐

    **?桔妹導讀:**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高,采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐,遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......

    uj5u.com 2020-09-10 06:10:21 more
  • 滴滴資料通道服務演進之路

    **?桔妹導讀:**滴滴資料通道引擎承載著全公司的資料同步,為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加,資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程,遇到的問題以及今后的規劃。 #1. 背景 資料,對于任何一家互聯網公司來說都是非常重要的資產,公司的大資料 ......

    uj5u.com 2020-09-10 06:11:05 more
  • 滴滴AI Labs斬獲國際機器翻譯大賽中譯英方向世界第三

    **桔妹導讀:**深耕人工智能領域,致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎,這次獲獎的專案是什么呢?一起來看看詳細報道吧! 近日,由國際計算語言學協會ACL(The Association for Computational Linguistics)舉辦的世界最具影響力的機器 ......

    uj5u.com 2020-09-10 06:11:29 more
  • MPP (Massively Parallel Processing)大規模并行處理

    1、什么是mpp? MPP (Massively Parallel Processing),即大規模并行處理,在資料庫非共享集群中,每個節點都有獨立的磁盤存盤系統和記憶體系統,業務資料根據資料庫模型和應用特點劃分到各個節點上,每臺資料節點通過專用網路或者商業通用網路互相連接,彼此協同計算,作為整體提供 ......

    uj5u.com 2020-09-10 06:11:41 more
  • 滴滴資料倉庫指標體系建設實踐

    **桔妹導讀:**指標體系是什么?如何使用OSM模型和AARRR模型搭建指標體系?如何統一流程、規范化、工具化管理指標體系?本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標,系統化的組織起來,通 ......

    uj5u.com 2020-09-10 06:12:52 more
  • 單表千萬行資料庫 LIKE 搜索優化手記

    我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索,LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料,可以使用下面的 SQL 陳述句: SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......

    uj5u.com 2020-09-10 06:13:25 more
  • 滴滴Ceph分布式存盤系統優化之鎖優化

    **桔妹導讀:**Ceph是國際知名的開源分布式存盤系統,在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統, ......

    uj5u.com 2020-09-10 06:14:51 more
  • es~通過ElasticsearchTemplate進行聚合~嵌套聚合

    之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章,這一次主要寫一個嵌套的聚合,例如先對sex集合,再對desc聚合,最后再對age求和,共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by,avg,sum等函式,Aggregation ......

    uj5u.com 2020-09-10 06:14:59 more
  • 爬蟲日志監控 -- Elastc Stack(ELK)部署

    傻瓜式部署,只需替換IP與用戶 導讀: 現ELK四大組件分別為:Elasticsearch(核心)、logstash(處理)、filebeat(采集)、kibana(可視化) 下載均在https://www.elastic.co/cn/downloads/下tar包,各組件版本最好一致,配合fdm會 ......

    uj5u.com 2020-09-10 06:15:05 more
最新发布
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取? 快取就是資料交換的緩沖區(稱作Cache),是存盤資料的臨時地方,一般讀寫性能較高。 快取的作用: 降低后端負載 提高讀寫效率,降低回應時間 快取的成本: 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下,當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:33:24 more
  • MySQL中binlog備份腳本分享

    關于MySQL的二進制日志(binlog),我們都知道二進制日志(binlog)非常重要,尤其當你需要point to point災難恢復的時侯,所以我們要對其進行備份。關于二進制日志(binlog)的備份,可以基于flush logs方式先切換binlog,然后拷貝&壓縮到到遠程服務器或本地服務器 ......

    uj5u.com 2023-04-20 08:28:06 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼: 發送驗證碼的介面為:http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式:PO ......

    uj5u.com 2023-04-20 08:27:27 more
  • 快取與資料庫雙寫一致性幾種策略分析

    本文將對幾種快取與資料庫保證資料一致性的使用方式進行分析。為保證高并發性能,以下分析場景不考慮執行的原子性及加鎖等強一致性要求的場景,僅追求最終一致性。 ......

    uj5u.com 2023-04-20 08:26:48 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼,對其進行一對一優化,而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題,盡量不要讓一個事務拖太長的時間 例如檔案上傳時,應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:26:35 more
  • 云時代,MySQL到ClickHouse資料同步產品對比推薦

    ClickHouse 在執行分析查詢時的速度優勢很好的彌補了MySQL的不足,但是對于很多開發者和DBA來說,如何將MySQL穩定、高效、簡單的同步到 ClickHouse 卻很困難。本文對比了 NineData、MaterializeMySQL(ClickHouse自帶)、Bifrost 三款產品... ......

    uj5u.com 2023-04-20 08:26:29 more
  • sql陳述句優化

    問題查找及措施 問題查找 需要找到具體的代碼,對其進行一對一優化,而非一直把關注點放在服務器和sql平臺 降低簡化每個事務中處理的問題,盡量不要讓一個事務拖太長的時間 例如檔案上傳時,應將檔案上傳這一步放在事務外面 微軟建議 4.啟動sql定時執行計劃 怎么啟動sqlserver代理服務-百度經驗 ......

    uj5u.com 2023-04-20 08:25:13 more
  • Redis 報”OutOfDirectMemoryError“(堆外記憶體溢位)

    Redis 報錯“OutOfDirectMemoryError(堆外記憶體溢位) ”問題如下: 一、報錯資訊: 使用 Redis 的業務介面 ,產生 OutOfDirectMemoryError(堆外記憶體溢位),如圖: 格式化后的報錯資訊: { "timestamp": "2023-04-17 22: ......

    uj5u.com 2023-04-20 08:24:54 more
  • day02-2-商鋪查詢快取

    功能02-商鋪查詢快取 3.商鋪詳情快取查詢 3.1什么是快取? 快取就是資料交換的緩沖區(稱作Cache),是存盤資料的臨時地方,一般讀寫性能較高。 快取的作用: 降低后端負載 提高讀寫效率,降低回應時間 快取的成本: 資料一致性成本 代碼維護成本 運維成本 3.2需求說明 如下,當我們點擊商店詳 ......

    uj5u.com 2023-04-20 08:24:03 more
  • day02-短信登錄

    功能實作02 2.功能01-短信登錄 2.1基于Session實作登錄 2.1.1思路分析 2.1.2代碼實作 2.1.2.1發送短信驗證碼 發送短信驗證碼: 發送驗證碼的介面為:http://127.0.0.1:8080/api/user/code?phone=xxxxx<手機號> 請求方式:PO ......

    uj5u.com 2023-04-20 08:23:11 more