主頁 >  其他 > 第六章 鎖(學習筆記)

第六章 鎖(學習筆記)

2021-08-31 19:19:32 其他

  開發多用戶、資料庫驅動的應用時,最大的一個難點是:一方面要最大程度地利用資料庫地并發訪問,另外一方面還要確保每個用戶能以一致地方式讀取和修改資料,

  1. 什么是鎖

  鎖機制用于管理對共享資源地并發訪問,InnoDB存盤引擎會在行級別上對表資料上鎖,

  2. lock與latch

  latch是一種輕量級地鎖,分為mutex(互斥量)和rwlock(讀寫鎖),其目的是用來保證并發執行緒操作臨界資源地正確性,并且通常沒有死鎖檢測機制,

  lock的物件是事務,用來鎖定的是資料庫中的物件,如表、頁、行,lock的物件僅在事務commit或rollback后進行釋放,另外,lock有死鎖機制,

  3. InnoDB存盤引擎中的鎖

  3.1 鎖的型別

  • 共享鎖(S lock)允許事務讀一行資料
  • 排他鎖(X lock)允許事務洗掉或更新一行資料

  InnoDB存盤引擎還支持一種額外的鎖方式,即意向鎖(Intension lock),意向鎖將鎖定的物件分為多個層次,意向鎖意味著事務希望在更細粒度上進行加鎖,  

  若將上鎖的物件看成一個樹,那么對對下層的物件上鎖(最細粒度的物件上鎖),需要首先對粗粒度的物件上鎖,如下圖所示,如果需要對頁上的記錄r上X鎖,需要對資料庫A、表、頁上意向鎖IX,最后對記錄r上X鎖,

   

  鎖的兼容性如下圖所示,

        

  3.2 一致性非鎖定讀

  一致性非鎖定讀(consistent nonlocking read)指InnoDB存盤引擎通過行多版本控制的方式來讀取當前執行時間資料庫中的行資料,如果讀取的行正在執行DELETE或UPDATE操作,這時,讀取操作不會等待行上鎖的釋放,InnoDB存盤引擎會去讀取行的一個快照資料,非鎖定讀機制可以極大的提高資料庫的并發性, 

  

  讀取的快照資料來自undo段,undo用來在事務中回滾資料,因此快照資料本身沒有額外的開銷,由圖中可以看到,一個行記錄可能有不止一個快照資料,一般稱這種技術為行多版本技術,由此帶來的并發控制,稱之為多版本并發控制(multi version concurrency control MVCC),

  在READ COMMITED 事務隔離級別下,對于快照資料,一致性非鎖定讀總是讀取非鎖定行的最新一份快照資料,在REPEATABLE READ 事務隔離級別下,對于快照資料,一致性非鎖定讀總是讀取事務開始時的行資料版本,

 

  如上表所示執行,在時間點5,兩種隔離模式,得到的結果一樣,即id = 1; 在時間點7,兩種隔離模式,會得到不同的結果,READ COMMITED 得到 Empty Set (讀取最新的行資料快照), REPEATABLE READ仍是id =1(事務開始時的行資料), 

 

  3.3 一致性鎖定讀

  在某些情況下,用戶需要顯式地對資料庫讀取操作進行加鎖以保證資料邏輯的一致性,InnoDB存盤引擎對于SELECT陳述句支持兩種一致性地鎖定讀(locking read)操作:

  • SELECT.....FOR UPDATE (對讀取的行加X鎖,其他事務不能對已鎖定的行加上任何鎖)
  • SELECT.....LOCK IN SHARE MODE (對讀取的行加S鎖,其他事務可以對被鎖定地行加S鎖,但是加X鎖,則會被阻塞)

  此外,這兩種操作必須在一個事務中,當事務提交了,鎖也就釋放了,因此,在使用上述兩句SELECT鎖定陳述句時,務必加上BEGIN, START TRANSACTION 或者SET AUTOCOMMIT=0,

  3.4 外鍵和鎖

  對于外鍵地插入或更新,首先需要查詢父表中的記錄,即SELECT父表,但是對于父表的SELECT操作,不是使用一致性非鎖定讀的方式,因為這樣會發生資料不一致的問題,這時,使用的是SELECT...LOCK IN SHARE MODE方式,即主動對父表加一個S鎖,如果這時父表上已經有了X鎖,子表上的操作會被阻塞,如下表所示,

        

  4 鎖的演算法

  4.1 行鎖的三種演算法

  InnoDB存盤引擎有三種行鎖的演算法:

  • Record Lock:單個行記錄上的鎖 (總是會鎖住索引記錄,如果存盤引擎表在建立的時候沒有設定任何一個索引,那么這時InnoDB存盤引擎會使用隱式的主鍵來進行鎖定)
  • Gap Lock:間隙鎖,鎖定一個范圍,但不包含記錄本身
  • Next-Key-Lock:Gap Lock + Record Lock 

  InnoDB對行的查詢都是采用Next-Key-Lock演算法,該演算法可以解決Phantom Problem,假如一個索引有10,11,13,20這四個值,那么被索引的區間為:(-∞, 10], (10, 11], (11, 13], (13, 20], (20, +∞)

  當查詢的列是唯一索引時,會降級為Record Lock,若是輔助索引,情況會不太一樣,先創建如下測驗表z:

  

      

  現在會話A中執行上面的SQL陳述句,由于b列是輔助索引,Next-Key-Lock演算法會鎖定(1,3] ,另外,特別需要注意的是,InnoDB存盤引擎還會對輔助索引下個鍵值(即6)加上gap lock,所以鎖定的輔助索引為1 2 3 4 5,所以運行下面的SQL陳述句都會被阻塞,

    

   而下面的SQL陳述句則不會被阻塞:

  

  4.2 解決Phantom Problem

  在默認的事務隔離級別下,即REPEATABLE READ下,InnoDB存盤引擎采用Next-Key-Locking機制來避免Phantom Problem(幻像問題),

  Phantom Problem是指在同一事務下,連續執行兩次同樣的SQL陳述句可能導致不同的結果,第二次的SQL陳述句可能回傳之前不存在的行,

   假設表由1、2、5三個值組成,若執行如下的SQL陳述句:

   

        

    會話A在時間3 和 7 執行的SQL陳述句會得到不同的結果,為了避免Phantom Problem,對于上述SQL陳述句,其鎖住的不是5這個值,而是對(2,∞)這個范圍加了X鎖,因此,對于這個范圍的插入都是不被允許的,從而避免了Phantom Problem,

  5. 鎖問題

  5.1 臟讀

  臟資料是指事務對緩沖池中行記錄進行了修改,但是還沒有提交的資料,如果讀到了臟資料,即一個事務可以讀到另外一個事務中未提交的資料,則顯然違反了資料庫的隔離性(臟讀),下表是一個臟讀的例子,

 

  READ UNCOMMITTED可以應用在一些比較特殊的情況,例如,replication環境中的slave節點,并且在該slave上的查詢并不需要特別精確的回傳值

  5.2 不可重復讀

  不可重復讀是指在一個事務內多次讀取同一資料集合,在這個事務還沒有結束時,另外一個事務也訪問同一資料集合,并做了一些DML操作,因此,在第一個事務中的兩次讀資料之間,由于第二個事務的修改,那么第一個事務兩次讀到的資料可能是不一樣的,即一個事務內兩次讀到的資料是不一樣的,即不可重復讀,不可重復讀的示例如下表所示,

   

   InnoDB存盤引擎的默認事務隔離級別是READ REPEATABLE,采用Next-Key-Lock演算法,避免了不可重復讀的現象,

  5.3 丟失更新

   一個事務的更新操作會被另一個事務的更新操作所覆寫,從而導致資料的不一致,出現下面的情況時,就會發生丟失更新:

  1) 事務T1查詢一行資料,放入本地記憶體,并顯示給一個終端用戶User1

  2) 事務T2也查詢該行資料,并將取得的資料顯示給終端用戶User2

  3) User1修改該行記錄,更新資料庫并提交

  4) User2修改該行記錄,更新并提交資料

  要避免丟失更新發生,需要事務在這種情況下的操作變成串行化,而不是并行的操作,如下表所示:

        

  6. 阻塞

  因為不同鎖之間的兼容性關系,在有些時刻一個事務中的鎖需要等待另一個事務中的鎖釋放它所占用的資源,這就是阻塞,

  在InnoDB存盤引擎中,引數innodb_lock_wait_timeout用來控制等待的時間(默認50s,動態引數,可以在運行時調整),innodb_on_timeout(靜態引數,不可在啟動后,修改)用來設定是否在等待超時時,對進行中的事務進行回滾操作(默認是OFF,代表不回滾),當做默認設定時,可能存在如下問題:

  

  

 

     

    

 

   由以上代碼可知,事務B由于等待事務A釋放a<4的鎖資源發生了超時,雖然沒有進行COMMIT操作,但是數值5還是插入到了資料庫中,這是十分危險的狀態,用戶必須判斷是否需要COMMIT還是ROLLBACK,然后再進行下一步操作, 

  7. 死鎖

   當兩個或兩個以上的事務在執行程序中,因爭奪鎖資源而造成的一種互相等待的現象,

  解決死鎖問題最簡單的方法就是超時回滾(當一個等待時間超過閾值,進行回滾),

  資料庫一般采用wait-for graph(等待圖)的方式來進行死鎖檢測,需要保存以下兩種資訊:

  • 鎖的資訊鏈表
  • 事務等待鏈表

  在Transaction list 中可以看到共有四個事務t1, t2, t3, t4.

  • 事務t1需要等待t2中row1的資源(t1指向t2)
  • 事務t2需要等待t1 t4所占用的row2資源
  • 事務t3需要等待t1, t2, t4占用的資源

  

    

 

  存在t1 t2的回路,故而存在死鎖,InnoDB存盤引擎一般選擇回滾undo量最小的事務,

  鎖升級是指將當前鎖的粒度降低,即把一個表的1000個行鎖升級為一個頁鎖,或者將頁鎖升級為表鎖,

  InnoDB不存在鎖升級問題,其根據每個事務訪問的每個頁對鎖進行管理,采用位圖的方式,因此,不管一個事務鎖住頁中一個記錄還是多個記錄,開銷通常是一致的,

  假設一張表有3 000 000個資料頁,每個頁大約有100條記錄,總共有300 000 000條記錄,若一個事務更新全表更新陳述句,需要對所有記錄加X鎖,若根據每行記錄產生鎖物件,假設每個鎖10位元組,則鎖管理需要3GB記憶體,

  而InnoDB存盤引擎根據頁進行加鎖,每個頁的鎖資訊占30個位元組,則鎖物件僅需90MB記憶體,

 

 

  

 

 

  

轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/296137.html

標籤:其他

上一篇:第四章 表 (學習筆記)

下一篇:第五章 索引與演算法(學習筆記)

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 網閘典型架構簡述

    網閘架構一般分為兩種:三主機的三系統架構網閘和雙主機的2+1架構網閘。 三主機架構分別為內端機、外端機和仲裁機。三機無論從軟體和硬體上均各自獨立。首先從硬體上來看,三機都用各自獨立的主板、記憶體及存盤設備。從軟體上來看,三機有各自獨立的作業系統。這樣能達到完全的三機獨立。對于“2+1”系統,“2”分為 ......

    uj5u.com 2020-09-10 02:00:44 more
  • 如何從xshell上傳檔案到centos linux虛擬機里

    如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......

    uj5u.com 2020-09-10 02:00:47 more
  • 一、SQLMAP入門

    一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......

    uj5u.com 2020-09-10 02:00:50 more
  • Metasploit 簡單使用教程

    metasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......

    uj5u.com 2020-09-10 02:00:53 more
  • 游戲逆向之驅動層與用戶層通訊

    驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......

    uj5u.com 2020-09-10 02:00:56 more
  • 北斗電力時鐘(北斗授時服務器)讓網路資料更精準

    北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......

    uj5u.com 2020-09-10 02:01:03 more
  • 【CTF】CTFHub 技能樹 彩蛋 writeup

    ?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......

    uj5u.com 2020-09-10 02:04:05 more
  • 02windows基礎操作

    我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......

    uj5u.com 2020-09-10 02:04:18 more
  • 03.Linux基礎操作

    我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......

    uj5u.com 2020-09-10 02:04:30 more
  • 05HTML

    01HTML介紹 02頭部標簽講解03基礎標簽講解04表單標簽講解 HTML前段語言 js1.了解代碼2.根據代碼 懂得挖掘漏洞 (POST注入/XSS漏洞上傳)3.黑帽seo 白帽seo 客戶網站被黑帽植入劫持代碼如何處理4.熟悉html表單 <html><head><title>TDK標題,描述 ......

    uj5u.com 2020-09-10 02:04:36 more
最新发布
  • 2023年最新微信小程式抓包教程

    01 開門見山 隔一個月發一篇文章,不過分。 首先回顧一下《微信系結手機號資料庫被脫庫事件》,我也是第一時間得知了這個訊息,然后跟蹤了整件事情的經過。下面是這起事件的相關截圖以及近日流出的一萬條資料樣本: 個人認為這件事也沒什么,還不如關注一下之前45億快遞資料查詢渠道疑似在近日復活的訊息。 訊息是 ......

    uj5u.com 2023-04-20 08:48:24 more
  • web3 產品介紹:metamask 錢包 使用最多的瀏覽器插件錢包

    Metamask錢包是一種基于區塊鏈技術的數字貨幣錢包,它允許用戶在安全、便捷的環境下管理自己的加密資產。Metamask錢包是以太坊生態系統中最流行的錢包之一,它具有易于使用、安全性高和功能強大等優點。 本文將詳細介紹Metamask錢包的功能和使用方法。 一、 Metamask錢包的功能 數字資 ......

    uj5u.com 2023-04-20 08:47:46 more
  • vulnhub_Earth

    前言 靶機地址->>>vulnhub_Earth 攻擊機ip:192.168.20.121 靶機ip:192.168.20.122 參考文章 https://www.cnblogs.com/Jing-X/archive/2022/04/03/16097695.html https://www.cnb ......

    uj5u.com 2023-04-20 07:46:20 more
  • 從4k到42k,軟體測驗工程師的漲薪史,給我看哭了

    清明節一過,盲猜大家已經無心上班,在數著日子準備過五一,但一想到銀行卡里的余額……瞬間心情就不美麗了。最近,2023年高校畢業生就業調查顯示,本科畢業月平均起薪為5825元。調查一出,便有很多同學表示自己又被平均了。看著這一資料,不免讓人想到前不久中國青年報的一項調查:近六成大學生認為畢業10年內會 ......

    uj5u.com 2023-04-20 07:44:00 more
  • 最新版本 Stable Diffusion 開源 AI 繪畫工具之中文自動提詞篇

    🎈 標簽生成器 由于輸入正向提示詞 prompt 和反向提示詞 negative prompt 都是使用英文,所以對學習母語的我們非常不友好 使用網址:https://tinygeeker.github.io/p/ai-prompt-generator 這個網址是為了讓大家在使用 AI 繪畫的時候 ......

    uj5u.com 2023-04-20 07:43:36 more
  • 漫談前端自動化測驗演進之路及測驗工具分析

    隨著前端技術的不斷發展和應用程式的日益復雜,前端自動化測驗也在不斷演進。隨著 Web 應用程式變得越來越復雜,自動化測驗的需求也越來越高。如今,自動化測驗已經成為 Web 應用程式開發程序中不可或缺的一部分,它們可以幫助開發人員更快地發現和修復錯誤,提高應用程式的性能和可靠性。 ......

    uj5u.com 2023-04-20 07:43:16 more
  • CANN開發實踐:4個DVPP記憶體問題的典型案例解讀

    摘要:由于DVPP媒體資料處理功能對存放輸入、輸出資料的記憶體有更高的要求(例如,記憶體首地址128位元組對齊),因此需呼叫專用的記憶體申請介面,那么本期就分享幾個關于DVPP記憶體問題的典型案例,并給出原因分析及解決方法。 本文分享自華為云社區《FAQ_DVPP記憶體問題案例》,作者:昇騰CANN。 DVPP ......

    uj5u.com 2023-04-20 07:43:03 more
  • msf學習

    msf學習 以kali自帶的msf為例 一、msf核心模塊與功能 msf模塊都放在/usr/share/metasploit-framework/modules目錄下 1、auxiliary 輔助模塊,輔助滲透(埠掃描、登錄密碼爆破、漏洞驗證等) 2、encoders 編碼器模塊,主要包含各種編碼 ......

    uj5u.com 2023-04-20 07:42:59 more
  • Halcon軟體安裝與界面簡介

    1. 下載Halcon17版本到到本地 2. 雙擊安裝包后 3. 步驟如下 1.2 Halcon軟體安裝 界面分為四大塊 1. Halcon的五個助手 1) 影像采集助手:與相機連接,設定相機引數,采集影像 2) 標定助手:九點標定或是其它的標定,生成標定檔案及內參外參,可以將像素單位轉換為長度單位 ......

    uj5u.com 2023-04-20 07:42:17 more
  • 在MacOS下使用Unity3D開發游戲

    第一次發博客,先發一下我的游戲開發環境吧。 去年2月份買了一臺MacBookPro2021 M1pro(以下簡稱mbp),這一年來一直在用mbp開發游戲。我大致分享一下我的開發工具以及使用體驗。 1、Unity 官網鏈接: https://unity.cn/releases 我一般使用的Apple ......

    uj5u.com 2023-04-20 07:40:19 more