主頁 >  其他 > Mysql事務隔離級別與鎖機制

Mysql事務隔離級別與鎖機制

2020-09-25 22:31:36 其他

Mysql事務隔離級別與鎖機制

概述

資料庫一般都會并發執行多個事務,多個事務可能會并發的對相同的資料進行CRUD操作,有時候就會導致臟讀、臟寫、不可重復讀、幻讀這些問題,
為了解決多事務并發問題,Mysql資料庫設計了事務隔離機制、鎖機
制、MVCC多版本并發控制隔離機制,用一整套機制來解決多事務并發問題,

事務及其ACID屬性

事務具有以下4個屬性,通常簡稱為事務的ACID屬性,

原子性(Atomicity) :事務是一個原子操作單元,其對資料的修改,要么全都執行,要么全都不執行,
一致性(Consistent) :在事務開始和完成時,資料都必須保持一致狀態,這意味著所有相關的資料規
則都必須應用于事務的修改,以保持資料的完整性,
隔離性(Isolation) :資料庫系統提供一定的隔離機制,保證事務在不受外部并發操作影響的“獨立”環境執行,這意味著事務處理程序中的中間狀態對外部是不可見的,反之亦然,
持久性(Durable) :事務完成之后,它對于資料的修改是永久性的,即使出現系統故障也能夠保持,

并發事務處理帶來的問題

更新丟失(Lost Update)或臟寫
當兩個或多個事務選擇同一行資料時,然后基于最初選定的值更新該行時,由于每個事務都不知道其他事務的存在,就會發生丟失更新問題–最后的更新覆寫了由其他事務所做的更新,
  
臟讀(Dirty Reads)
  一個事務正在對一條記錄做修改,在這個事務完成并提交前,這條記錄的資料就處于不一致的狀態;這時,另一個事務也來讀取同一條記錄,如果不加控制,第二個事務讀取了這些“臟”資料,并據此作進一步的
處理,就會產生未提交的資料依賴關系,這種現象被形象的叫做“臟讀”,
  一句話:事務A讀取到了事務B已經修改但尚未提交的資料,還在這個資料基礎上做了操作,此時,如果B事務回滾,A讀取的資料無效,不符合一致性要求,
  
不可重讀(Non-Repeatable Reads)
  一個事務在讀取某些資料后的某個時間,再次讀取以前讀過的資料,卻發現其讀出的資料已經發生了改
變、或某些記錄已經被洗掉了!這種現象就叫做“不可重復讀”,
  一句話:事務A內部的相同查詢陳述句在不同時刻讀出的結果不一致,不符合隔離性
  
幻讀(Phantom Reads)
  一個事務按相同的查詢條件重新讀取以前檢索過的資料,卻發現其他事務插入了滿足其查詢條件的新資料,這種現象就稱為“幻讀”,
  一句話:事務A讀取到了事務B提交的新增資料,不符合隔離性
  
事務隔離級別
“臟讀”、“不可重復讀”和“幻讀”,其實都是資料庫讀一致性問題,必須由資料庫提供一定的事務隔離機制來解決,
在這里插入圖片描述資料庫的事務隔離越嚴格,并發副作用越小,但付出的代價也就越大,因為事務隔離實質上就是使事務在一定程度上“串行化”進行,這顯然與“并發”是矛盾的,同時,不同的應用對讀一致性和事務隔離程度的要求也是不同的,比如多應用對“不可重復讀"和“幻讀”并不敏感,可能更關心資料并發訪問的能力,
當前資料庫的事務隔離級別: show variables like ‘tx_isolation’;
設定事務隔離級別:set tx_isolation=‘REPEATABLE-READ’;
Mysql默認的事務隔離級別是可重復讀,用Spring開發程式時,如果不設定隔離級別默認用Mysql設定的隔離級別,如果Spring設定了就用已經設定的隔離級別

鎖詳解

鎖是計算機協調多個行程或執行緒并發訪問某一資源的機制,在資料庫中,除了傳統的計算資源(如CPU、RAM、I/O等)的爭用以外,資料也是一種供需要用戶共享的資源,如何保證資料并發訪問的一致性、有效性是所有資料庫必須解決的一個問題,鎖沖突也是影響資料庫并發訪問性能的一個重要因素,

鎖分類

  • 從性能上分為樂觀鎖(用版本對比來實作)和悲觀鎖
  • 從對資料庫操作的型別分,分為讀鎖和寫鎖(都屬于悲觀鎖)
    讀鎖(共享鎖,S鎖(Shared)):針對同一份資料,多個讀操作可以同時進行而不會互相影響
    寫鎖(排它鎖,X鎖(eXclusive)):當前寫操作沒有完成前,它會阻斷其他寫鎖和讀鎖
  • 從對資料操作的粒度分,分為表鎖和行鎖

表鎖
每次操作鎖住整張表,開銷小,加鎖快;不會出現死鎖;鎖定粒度大,發生鎖沖突的概率最高,并發度最低;一般用在整表資料遷移的場景,

基本操作

  • 手動增加表鎖
    lock table 表名稱 read(write),表名稱2 read(write);
  • 查看表上加過的鎖
    show open tables;
  • 洗掉表鎖
    unlock tables;

分析

  • 加讀鎖
    當前session和其他session都可以讀該表,當前session中插入或者更新鎖定的表都會報錯,其他session插入或更新則會等待
  • 加寫鎖
    當前session對該表的增刪改查都沒有問題,其他session對該表的所有操作被阻塞

結論
1、對MyISAM表的讀操作(加讀鎖) ,不會阻寒其他行程對同一表的讀請求,但會阻賽對同一表的寫請求,只有當讀鎖釋放后,才會執行其它行程的寫操作,
2、對MylSAM表的寫操作(加寫鎖) ,會阻塞其他行程對同一表的讀和寫操作,只有當寫鎖釋放后,才會執行其它行程的讀寫操作

行鎖
每次操作鎖住一行資料,開銷大,加鎖慢;會出現死鎖;鎖定粒度最小,發生鎖沖突的概率最低,并發度最高,
InnoDB與MYISAM的最大不同有兩點:

  • InnoDB支持事務(TRANSACTION)
  • InnoDB支持行級鎖

場景
一個session開啟事務更新不提交,另一個session更新同一條記錄會阻塞,更新不同記錄不會阻塞

總結:

MyISAM在執行查詢陳述句SELECT前,會自動給涉及的所有表加讀鎖,在執行update、insert、delete操作會自動給涉及的表加寫鎖,

InnoDB在執行查詢陳述句SELECT時(非串行隔離級別),不會加鎖,但是update、insert、delete操作會加行鎖,

簡而言之,就是讀鎖會阻塞寫,但是不會阻塞讀,而寫鎖則會把讀和寫都阻塞,

讀未提交:set tx_isolation=‘read-uncommitted’
B的事務還沒提交,A就可以查詢到B已經更新的資料,一旦B的事務因為某種原因回滾,所有的操作都將會被撤銷,那A查詢到的資料其實就是臟資料

讀已提交:set tx_isolation=‘read-committed’
A查詢所有記錄,在A的事務提交之前,打開B,更新表,B的事務還沒提交,A不能查詢到B已經更新的資料,解決了臟讀問題,B的事務提交,A執行與上一步相同的查詢,結果 與上一步不一致,即產生了不可重復讀的問題

可重復讀:set tx_isolation=‘repeatable-read’
A查詢所有記錄,在A的事務提交之前,打開B,更新表并提交,在A查詢表所有記錄,與上次查詢結果一致,沒有出現不可重復讀的問題,重新打開B,插入一條新資料后提交,在A查詢表所有記錄,沒有查出新增資料,所以感覺上是沒有出現幻讀,但在A執行update更新新增的資料是可以更新成功的,再次查詢就能查到B新增的資料了,出現了幻讀問題

串行化:set tx_isolation=‘serializable’
A查詢所有記錄,打開B,更新相同的記錄會被阻塞等待,更新不同的記錄可以成功,說明在串行模式下innodb的查詢也會被加上行鎖,
如果A執行的是一個范圍查詢,那么該范圍內的所有行包括每行記錄所在的間隙區間范圍都會被加鎖,此時如果B在該范圍內插入資料都會被阻塞,所以就避免了幻讀,
這種隔離級別并發性極低,開發中很少會用到,

間隙鎖(Gap Lock)
間隙鎖,鎖的就是兩個值之間的空隙,Mysql默認級別是可重復讀(repeatable-read),沒辦法解決幻讀問題,間隙鎖在某些情況下可以解決幻讀問題的,
范圍:范圍所包含的所有行記錄(包括間隙行記錄)以及行記錄所在的間隙都會被加鎖(包右不包左),
間隙鎖是在可重復讀隔離級別下才會生效,

臨鍵鎖(Next-key Locks)
Next-Key Locks是行鎖與間隙鎖的組合(不包含左邊),
 
無索引行鎖會升級為表鎖
鎖主要是加在索引上,如果對非索引欄位更新,行鎖會變表鎖

InnoDB的行鎖是針對索引加的鎖,不是針對記錄加的鎖,并且該索引不能失效,否則都會從行鎖升級為表鎖,

鎖定某一行還可以用lock in share mode(共享鎖) 和for update(排它鎖),例如:select * from test_innodb_lock where a = 2 for update; 這樣其他session只能讀這行資料,修改則會被阻塞,直到鎖定行的session提交

結論
Innodb存盤引擎由于實作了行級鎖定,雖然在鎖定機制的實作方面所帶來的性能損耗可能比表級鎖定會要更高一下,但是在整體并發處理能力方面要遠遠優于MYISAM的表級鎖定的,當系統并發量高的時候,Innodb的整體性能和MYISAM相比就會有比較明顯的優勢了,
但是,Innodb的行級鎖定同樣也有其脆弱的一面,當我們使用不當的時候,可能會讓Innodb的整體性能表現可能會更差,

行鎖分析
通過檢查InnoDB_row_lock狀態變數來分析系統上的行鎖的爭奪情況

1 show status like 'innodb_row_lock%';

對各個狀態量的說明如下:
Innodb_row_lock_current_waits: 當前正在等待鎖定的數量
Innodb_row_lock_time: 從系統啟動到現在鎖定總時間長度
Innodb_row_lock_time_avg: 每次等待所花平均時間
Innodb_row_lock_time_max:從系統啟動到現在等待最長的一次所花時間
Innodb_row_lock_waits:系統啟動后到現在總共等待的次數
對于這5個狀態變數,比較重要的主要是:
Innodb_row_lock_time_avg (等待平均時長)
Innodb_row_lock_waits (等待總次數)
Innodb_row_lock_time(等待總時長)
尤其是當等待次數很高,而且每次等待時長也不小的時候,我們就需要分析系統中為什么會有如此多的等待,
然后根據分析結果著手制定優化計劃,

查看INFORMATION_SCHEMA系統庫鎖相關資料表

1 ‐‐ 查看事務
2 select * from INFORMATION_SCHEMA.INNODB_TRX;
3 ‐‐ 查看鎖
4 select * from INFORMATION_SCHEMA.INNODB_LOCKS;
5 ‐‐ 查看鎖等待
6 select * from INFORMATION_SCHEMA.INNODB_LOCK_WAITS;
7
8 ‐‐ 釋放鎖,trx_mysql_thread_id可以從INNODB_TRX表里查看到
9 kill trx_mysql_thread_id
10
11 ‐‐ 查看鎖等待詳細資訊
12 show engine innodb status\G;

死鎖

set tx_isolation=‘repeatable-read’;
Session_1執行:select * from table where id=1 for update;
Session_2執行:select * from table where id=2 for update;
Session_1執行:select * from table where id=2 for update;
Session_2執行:select * from table where id=1 for update;
查看近期死鎖日志資訊:show engine innodb status\G;
大多數情況mysql可以自動檢測死鎖并回滾產生死鎖的那個事務,但是有些情況mysql沒法自動檢測死鎖

鎖優化建議

  • 盡可能讓所有資料檢索都通過索引來完成,避免無索引行鎖升級為表鎖
  • 合理設計索引,盡量縮小鎖的范圍
  • 盡可能減少檢索條件范圍,避免間隙鎖
  • 盡量控制事務大小,減少鎖定資源量和時間長度,涉及事務加鎖的sql盡量放在事務最后執行
  • 盡可能低級別事務隔離

轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/128491.html

標籤:AI

上一篇:Mysql系列第十五講 事務詳解

下一篇:Oracle 隱式資料型別轉換

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 網閘典型架構簡述

    網閘架構一般分為兩種:三主機的三系統架構網閘和雙主機的2+1架構網閘。 三主機架構分別為內端機、外端機和仲裁機。三機無論從軟體和硬體上均各自獨立。首先從硬體上來看,三機都用各自獨立的主板、記憶體及存盤設備。從軟體上來看,三機有各自獨立的作業系統。這樣能達到完全的三機獨立。對于“2+1”系統,“2”分為 ......

    uj5u.com 2020-09-10 02:00:44 more
  • 如何從xshell上傳檔案到centos linux虛擬機里

    如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......

    uj5u.com 2020-09-10 02:00:47 more
  • 一、SQLMAP入門

    一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......

    uj5u.com 2020-09-10 02:00:50 more
  • Metasploit 簡單使用教程

    metasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......

    uj5u.com 2020-09-10 02:00:53 more
  • 游戲逆向之驅動層與用戶層通訊

    驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......

    uj5u.com 2020-09-10 02:00:56 more
  • 北斗電力時鐘(北斗授時服務器)讓網路資料更精準

    北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......

    uj5u.com 2020-09-10 02:01:03 more
  • 【CTF】CTFHub 技能樹 彩蛋 writeup

    ?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......

    uj5u.com 2020-09-10 02:04:05 more
  • 02windows基礎操作

    我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......

    uj5u.com 2020-09-10 02:04:18 more
  • 03.Linux基礎操作

    我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......

    uj5u.com 2020-09-10 02:04:30 more
  • 05HTML

    01HTML介紹 02頭部標簽講解03基礎標簽講解04表單標簽講解 HTML前段語言 js1.了解代碼2.根據代碼 懂得挖掘漏洞 (POST注入/XSS漏洞上傳)3.黑帽seo 白帽seo 客戶網站被黑帽植入劫持代碼如何處理4.熟悉html表單 <html><head><title>TDK標題,描述 ......

    uj5u.com 2020-09-10 02:04:36 more
最新发布
  • 2023年最新微信小程式抓包教程

    01 開門見山 隔一個月發一篇文章,不過分。 首先回顧一下《微信系結手機號資料庫被脫庫事件》,我也是第一時間得知了這個訊息,然后跟蹤了整件事情的經過。下面是這起事件的相關截圖以及近日流出的一萬條資料樣本: 個人認為這件事也沒什么,還不如關注一下之前45億快遞資料查詢渠道疑似在近日復活的訊息。 訊息是 ......

    uj5u.com 2023-04-20 08:48:24 more
  • web3 產品介紹:metamask 錢包 使用最多的瀏覽器插件錢包

    Metamask錢包是一種基于區塊鏈技術的數字貨幣錢包,它允許用戶在安全、便捷的環境下管理自己的加密資產。Metamask錢包是以太坊生態系統中最流行的錢包之一,它具有易于使用、安全性高和功能強大等優點。 本文將詳細介紹Metamask錢包的功能和使用方法。 一、 Metamask錢包的功能 數字資 ......

    uj5u.com 2023-04-20 08:47:46 more
  • vulnhub_Earth

    前言 靶機地址->>>vulnhub_Earth 攻擊機ip:192.168.20.121 靶機ip:192.168.20.122 參考文章 https://www.cnblogs.com/Jing-X/archive/2022/04/03/16097695.html https://www.cnb ......

    uj5u.com 2023-04-20 07:46:20 more
  • 從4k到42k,軟體測驗工程師的漲薪史,給我看哭了

    清明節一過,盲猜大家已經無心上班,在數著日子準備過五一,但一想到銀行卡里的余額……瞬間心情就不美麗了。最近,2023年高校畢業生就業調查顯示,本科畢業月平均起薪為5825元。調查一出,便有很多同學表示自己又被平均了。看著這一資料,不免讓人想到前不久中國青年報的一項調查:近六成大學生認為畢業10年內會 ......

    uj5u.com 2023-04-20 07:44:00 more
  • 最新版本 Stable Diffusion 開源 AI 繪畫工具之中文自動提詞篇

    🎈 標簽生成器 由于輸入正向提示詞 prompt 和反向提示詞 negative prompt 都是使用英文,所以對學習母語的我們非常不友好 使用網址:https://tinygeeker.github.io/p/ai-prompt-generator 這個網址是為了讓大家在使用 AI 繪畫的時候 ......

    uj5u.com 2023-04-20 07:43:36 more
  • 漫談前端自動化測驗演進之路及測驗工具分析

    隨著前端技術的不斷發展和應用程式的日益復雜,前端自動化測驗也在不斷演進。隨著 Web 應用程式變得越來越復雜,自動化測驗的需求也越來越高。如今,自動化測驗已經成為 Web 應用程式開發程序中不可或缺的一部分,它們可以幫助開發人員更快地發現和修復錯誤,提高應用程式的性能和可靠性。 ......

    uj5u.com 2023-04-20 07:43:16 more
  • CANN開發實踐:4個DVPP記憶體問題的典型案例解讀

    摘要:由于DVPP媒體資料處理功能對存放輸入、輸出資料的記憶體有更高的要求(例如,記憶體首地址128位元組對齊),因此需呼叫專用的記憶體申請介面,那么本期就分享幾個關于DVPP記憶體問題的典型案例,并給出原因分析及解決方法。 本文分享自華為云社區《FAQ_DVPP記憶體問題案例》,作者:昇騰CANN。 DVPP ......

    uj5u.com 2023-04-20 07:43:03 more
  • msf學習

    msf學習 以kali自帶的msf為例 一、msf核心模塊與功能 msf模塊都放在/usr/share/metasploit-framework/modules目錄下 1、auxiliary 輔助模塊,輔助滲透(埠掃描、登錄密碼爆破、漏洞驗證等) 2、encoders 編碼器模塊,主要包含各種編碼 ......

    uj5u.com 2023-04-20 07:42:59 more
  • Halcon軟體安裝與界面簡介

    1. 下載Halcon17版本到到本地 2. 雙擊安裝包后 3. 步驟如下 1.2 Halcon軟體安裝 界面分為四大塊 1. Halcon的五個助手 1) 影像采集助手:與相機連接,設定相機引數,采集影像 2) 標定助手:九點標定或是其它的標定,生成標定檔案及內參外參,可以將像素單位轉換為長度單位 ......

    uj5u.com 2023-04-20 07:42:17 more
  • 在MacOS下使用Unity3D開發游戲

    第一次發博客,先發一下我的游戲開發環境吧。 去年2月份買了一臺MacBookPro2021 M1pro(以下簡稱mbp),這一年來一直在用mbp開發游戲。我大致分享一下我的開發工具以及使用體驗。 1、Unity 官網鏈接: https://unity.cn/releases 我一般使用的Apple ......

    uj5u.com 2023-04-20 07:40:19 more