0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

數(shù)據(jù)庫的鎖機(jī)制真正的原理

數(shù)據(jù)分析與開發(fā) ? 來源:Hollis ? 作者:Hollis ? 2021-11-12 09:33 ? 次閱讀

在MySQL數(shù)據(jù)庫中,為了解決并發(fā)問題,引入了很多的鎖機(jī)制,很多時候,數(shù)據(jù)庫的鎖是在有數(shù)據(jù)庫操作的過程中自動添加的。所以,這就導(dǎo)致很多程序員經(jīng)常會忽略數(shù)據(jù)庫的鎖機(jī)制的真正的原理。比如,經(jīng)常在面試中會問候選人,你知道MySQL Innodb的鎖,到底鎖的是什么嗎?關(guān)于這個問題的回答,聽到過很多種,但是很少有人可以把他回答的很完美。因?yàn)橄胍卮鸷眠@個問題,需要對數(shù)據(jù)庫的隔離級別、索引等都有一定的了解才行。MySQL Innodb的鎖的相關(guān)介紹,在MySQL的官方文檔(https://dev.mysql.com/doc/refman/8.0/en/innodb-locking.html#innodb-insert-intention-locks )中有一定的介紹,本文的介紹也是基于這篇官方文檔的。

Record Lock

Record Lock,翻譯成記錄鎖,是加在索引記錄上的鎖。例如,SELECT c1 FROM t WHERE c1 = 10 For UPDATE;會對c1=10這條記錄加鎖,為了防止任何其他事務(wù)插入、更新或刪除c1值為10的行。

需要特別注意的是,記錄鎖鎖定的是索引記錄。即使表沒有定義索引,InnoDB也會創(chuàng)建一個隱藏的聚集索引,并使用這個索引來鎖定記錄。

Gap Lock

Gap Lock,翻譯成間隙鎖,他指的是在索引記錄之間的間隙上的鎖,或者在第一個索引記錄之前或最后一個索引記錄之后的間隙上的鎖。那么,這里所謂的Gap(間隙)又怎么理解呢?Gap指的是InnoDB的索引數(shù)據(jù)結(jié)構(gòu)中可以插入新值的位置。當(dāng)你用語句SELECT…FOR UPDATE鎖定一組行時。InnoDB可以創(chuàng)建鎖,應(yīng)用于索引中的實(shí)際值以及他們之間的間隙。例如,如果選擇所有大于10的值進(jìn)行更新,間隙鎖將阻止另一個事務(wù)插入大于10的新值。

既然是鎖,那么就可能會影響到數(shù)據(jù)庫的并發(fā)性,所以,間隙鎖只有在Repeatable Reads這種隔離級別中才會起作用。

在Repeatable Reads這種隔離下,對于鎖定的讀操作(select … for update 、 lock in share mode)、update操作、delete操作時,會進(jìn)行如下的加鎖:

對于具有唯一搜索條件的唯一索引,InnoDB只鎖定找到的索引記錄,而不會鎖定間隙。

對于其他搜索條件,InnoDB鎖定掃描的索引范圍,使用gap lock或next-key lock來阻塞其他事務(wù)插入范圍覆蓋的間隙。

也就是說,對于SELECT FOR UPDATE、LOCK IN SHARE MODE、UPDATE和DELETE等語句處理時,除了對唯一索引的唯一搜索外都會獲取gap鎖或next-key鎖,即鎖住其掃描的范圍。

Next-Key Lock

Next-Key鎖是索引記錄上的記錄鎖和索引記錄之前間隙上的間隙鎖的組合。

假設(shè)一個索引包含值10、11、13和20。此索引可能的next-key鎖包括以下區(qū)間:

(-∞, 10] (10, 11] (11, 13] (13, 20] (20, ∞ ]

對于最后一個間隙,∞不是一個真正的索引記錄,因此,實(shí)際上,這個next-key鎖只鎖定最大索引值之后的間隙。所以,Next-Key 的鎖的范圍都是左開右閉的。Next-Key Lock和Gap Lock一樣,只有在InnoDB的RR隔離級別中才會生效。

Repeatable Reads能解決幻讀

很多人看過網(wǎng)上的關(guān)于數(shù)據(jù)庫事務(wù)級別的介紹,會認(rèn)為MySQL中Repeatable Reads能解決不可重復(fù)讀的問題,但是不能解決幻讀,只有Serializable才能解決。但其實(shí),這種想法是不對的。因?yàn)镸ySQL跟標(biāo)準(zhǔn)RR不一樣,標(biāo)準(zhǔn)的Repeatable Reads確實(shí)存在幻讀問題,但I(xiàn)nnoDB中的Repeatable Reads是通過next-key lock解決了RR的幻讀問題的。因?yàn)槲覀冎?,因?yàn)橛辛薾ext-key lock,所以在需要加行鎖的時候,會同時在索引的間隙中加鎖,這就使得其他事務(wù)無法在這些間隙中插入記錄,這就解決了幻讀的問題。關(guān)于這個問題,引起過廣泛的討論,可以參考:https://github.com/Yhzhtk/note/issues/42 ,這里有很多大神發(fā)表過自己的看法。

MySQL的加鎖原則

前面介紹過了Record Lock、Gap Lock和Next-Key Lock,但是并沒有說明加鎖規(guī)則。關(guān)于加鎖規(guī)則,我是看了丁奇大佬的《MySQL實(shí)戰(zhàn)45講》中的文章之后理解的,他總結(jié)的加鎖規(guī)則里面,包含了兩個“原則”、兩個“優(yōu)化”和一個“bug”:原則 1:加鎖的基本單位是 next-key lock。是一個前開后閉區(qū)間。原則 2:查找過程中訪問到的對象才會加鎖。優(yōu)化 1:索引上的等值查詢,給唯一索引加鎖的時候,next-key lock 退化為行鎖。優(yōu)化 2:索引上的等值查詢,向右遍歷時且最后一個值不滿足等值條件的時候,next-key lock 退化為間隙鎖。一個 bug:唯一索引上的范圍查詢會訪問到不滿足條件的第一個值為止。假如,數(shù)據(jù)庫表中當(dāng)前有以下記錄:

當(dāng)我們執(zhí)行update t set d=d+1 where id = 7的時候,由于表 t 中沒有 id=7 的記錄,所以:

根據(jù)原則 1,加鎖單位是 next-key lock,session A 加鎖范圍就是 (5,10];

根據(jù)優(yōu)化 2,這是一個等值查詢 (id=7),而 id=10 不滿足查詢條件,next-key lock 退化成間隙鎖,因此最終加鎖的范圍是 (5,10)。

當(dāng)我們執(zhí)行select * from t where id》=10 and id《11 for update的時候:

根據(jù)原則 1,加鎖單位是 next-key lock,會給 (5,10]加上 next-key lock,范圍查找就往后繼續(xù)找,找到 id=15 這一行停下來

根據(jù)優(yōu)化 1,主鍵 id 上的等值條件,退化成行鎖,只加了 id=10 這一行的行鎖。

根據(jù)原則 2,訪問到的都要加鎖,因此需要加 next-key lock(10,15]。因此最終加的是行鎖 id=10 和 next-key lock(10,15]。

當(dāng)我們執(zhí)行select * from t where id》10 and id《=15 for update的時候:* 根據(jù)原則 1,加鎖單位是 next-key lock,會給 (10,15]加上 next-key lock,并且因?yàn)?id 是唯一鍵,所以循環(huán)判斷到 id=15 這一行就應(yīng)該停止了。* 但是,InnoDB 會往前掃描到第一個不滿足條件的行為止,也就是 id=20。而且由于這是個范圍掃描,因此索引 id 上的 (15,20]這個 next-key lock 也會被鎖上。假如,數(shù)據(jù)庫表中當(dāng)前有以下記錄:

當(dāng)我們執(zhí)行select id from t where c=5 lock in share mode的時候:

根據(jù)原則 1,加鎖單位是 next-key lock,因此會給 (0,5]加上 next-key lock。要注意 c 是普通索引,因此僅訪問 c=5 這一條記錄是不能馬上停下來的,需要向右遍歷,查到 c=10 才放棄。

根據(jù)原則 2,訪問到的都要加鎖,因此要給 (5,10]加 next-key lock。

根據(jù)優(yōu)化 2:等值判斷,向右遍歷,最后一個值不滿足 c=5 這個等值條件,因此退化成間隙鎖 (5,10)。

根據(jù)原則 2 ,只有訪問到的對象才會加鎖,這個查詢使用覆蓋索引,并不需要訪問主鍵索引,所以主鍵索引上沒有加任何鎖。

當(dāng)我們執(zhí)行select * from t where c》=10 and c《11 for update的時候:

根據(jù)原則 1,加鎖單位是 next-key lock,會給 (5,10]加上 next-key lock,范圍查找就往后繼續(xù)找,找到 id=15 這一行停下來

根據(jù)原則 2,訪問到的都要加鎖,因此需要加 next-key lock(10,15]。

由于索引 c 是非唯一索引,沒有優(yōu)化規(guī)則,也就是說不會蛻變?yōu)樾墟i,因此最終 sesion A 加的鎖是,索引 c 上的 (5,10] 和 (10,15] 這兩個 next-key lock。

總結(jié)

以上,我們介紹了InnoDB中的鎖機(jī)制,一共有三種鎖,分別是Record Lock、Gap Lock和Next-Key Lock。Record Lock表示記錄鎖,鎖的是索引記錄。Gap Lock是間隙鎖,說的是索引記錄之間的間隙。Next-Key Lock是Record Lock和Gap Lock的組合,同時鎖索引記錄和間隙。他的范圍是左開右閉的。InnoDB的RR級別中,加鎖的基本單位是 next-key lock,只要掃描到的數(shù)據(jù)都會加鎖。唯一索引上的范圍查詢會訪問到不滿足條件的第一個值為止。同時,為了提升性能和并發(fā)度,也有兩個優(yōu)化點(diǎn):

索引上的等值查詢,給唯一索引加鎖的時候,next-key lock 退化為行鎖。

索引上的等值查詢,向右遍歷時且最后一個值不滿足等值條件的時候,next-key lock 退化為間隙鎖。

關(guān)于鎖的介紹,就是這么多了,但是其實(shí),RR的隔離級別引入的這些鎖,雖然一定程度上可解決很多如幻讀這樣的問題,但是也會帶來一些副作用,比如并發(fā)度降低、容易導(dǎo)致死鎖等。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 數(shù)據(jù)庫
    +關(guān)注

    關(guān)注

    7

    文章

    3739

    瀏覽量

    64181
  • MySQL
    +關(guān)注

    關(guān)注

    1

    文章

    794

    瀏覽量

    26359

原文標(biāo)題:數(shù)據(jù)庫的鎖,到底鎖的是什么?

文章出處:【微信號:DBDevs,微信公眾號:數(shù)據(jù)分析與開發(fā)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—SQL Server數(shù)據(jù)庫出現(xiàn)823錯誤的數(shù)據(jù)恢復(fù)案例

    SQL Server數(shù)據(jù)庫故障: SQL Server附加數(shù)據(jù)庫出現(xiàn)錯誤823,附加數(shù)據(jù)庫失敗。數(shù)據(jù)庫沒有備份,無法通過備份恢復(fù)數(shù)據(jù)庫。
    的頭像 發(fā)表于 09-20 11:46 ?235次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—SQL Server<b class='flag-5'>數(shù)據(jù)庫</b>出現(xiàn)823錯誤的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—raid5陣列上層Sql Server數(shù)據(jù)庫數(shù)據(jù)恢復(fù)案例

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)環(huán)境: 5塊硬盤組建一組RAID5陣列,劃分LUN供windows系統(tǒng)服務(wù)器使用。windows系統(tǒng)服務(wù)器內(nèi)運(yùn)行了Sql Server數(shù)據(jù)庫,存儲空間在操作系統(tǒng)層面劃分了三個邏輯分區(qū)
    的頭像 發(fā)表于 05-08 11:43 ?435次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—raid5陣列上層Sql Server<b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例

    選擇 KV 數(shù)據(jù)庫最重要的是什么?

    最后我也沒問清楚他們業(yè)務(wù)存啥(推測是這塊業(yè)務(wù)數(shù)據(jù)比較機(jī)密),但確實(shí)業(yè)務(wù)本身對可靠性要求非常高,開源 Redis 自身的可靠性無法滿足他們的要求,最終該用戶選擇使用 GaussDB(for Redis)數(shù)據(jù)庫,當(dāng)前數(shù)據(jù)量已經(jīng)是 2
    的頭像 發(fā)表于 03-28 22:11 ?637次閱讀
    選擇 KV <b class='flag-5'>數(shù)據(jù)庫</b>最重要的是什么?

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)】Oracle數(shù)據(jù)庫ASM實(shí)例無法掛載的數(shù)據(jù)恢復(fù)案例

    oracle數(shù)據(jù)庫ASM磁盤組掉線,ASM實(shí)例不能掛載。數(shù)據(jù)庫管理員嘗試修復(fù)數(shù)據(jù)庫,但是沒有成功。
    的頭像 發(fā)表于 02-01 17:39 ?423次閱讀
    【<b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)】Oracle<b class='flag-5'>數(shù)據(jù)庫</b>ASM實(shí)例無法掛載的<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例

    無模式數(shù)據(jù)庫的利與弊

    數(shù)據(jù)管理需求日益多樣,無論是金融服務(wù)、游戲還是社交媒體行業(yè),都要求支持實(shí)時數(shù)據(jù)處理和快速迭代,無模式數(shù)據(jù)庫因其靈活性和易用性而逐漸成為開發(fā)者的新選擇。那么,無模式數(shù)據(jù)庫到底有哪些特性呢
    的頭像 發(fā)表于 12-16 08:04 ?445次閱讀
    無模式<b class='flag-5'>數(shù)據(jù)庫</b>的利與弊

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—未開啟binlog的Mysql數(shù)據(jù)庫數(shù)據(jù)恢復(fù)案例

    mysql數(shù)據(jù)庫數(shù)據(jù)恢復(fù)環(huán)境: 本地服務(wù)器,windows server操作系統(tǒng) ,部署有mysql單實(shí)例,數(shù)據(jù)庫引擎類型為innodb,獨(dú)立表空間,無數(shù)據(jù)庫備份,未開啟binlog
    的頭像 發(fā)表于 12-08 14:18 ?1009次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—未開啟binlog的Mysql<b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例

    關(guān)于JSON數(shù)據(jù)庫

    如何理解JSON數(shù)據(jù)庫?作為NoSQL數(shù)據(jù)庫的一種類型,JSON數(shù)據(jù)庫有哪些優(yōu)勢呢?JSON數(shù)據(jù)庫如何運(yùn)作,它為應(yīng)用程序開發(fā)者帶來了哪些價值呢?
    的頭像 發(fā)表于 12-06 13:46 ?793次閱讀
    關(guān)于JSON<b class='flag-5'>數(shù)據(jù)庫</b>

    oracle數(shù)據(jù)庫的基本操作

    Oracle數(shù)據(jù)庫是一種關(guān)系數(shù)據(jù)庫管理系統(tǒng)(RDBMS),廣泛應(yīng)用于企業(yè)級應(yīng)用中。它具有強(qiáng)大的功能和靈活的配置選項(xiàng),可以滿足復(fù)雜的數(shù)據(jù)處理需求。本文將介紹Oracle數(shù)據(jù)庫的基本操作,
    的頭像 發(fā)表于 12-06 10:14 ?619次閱讀

    oracle數(shù)據(jù)庫的使用方法

    Oracle數(shù)據(jù)庫是一種關(guān)系型數(shù)據(jù)庫管理系統(tǒng),它由Oracle公司開發(fā)和維護(hù)。它提供了安全、可靠和高性能的數(shù)據(jù)庫管理解決方案,被廣泛應(yīng)用于企業(yè)級應(yīng)用和大型數(shù)據(jù)庫環(huán)境中。本文將詳細(xì)介紹O
    的頭像 發(fā)表于 12-06 10:10 ?1110次閱讀

    聊聊日志即數(shù)據(jù)庫

    數(shù)據(jù)庫故障恢復(fù)機(jī)制的前世今生》[1]一文中介紹過,由于磁盤的的順序訪問性能遠(yuǎn)好于隨機(jī)訪問,數(shù)據(jù)庫設(shè)計(jì)中通常都會采用WAL的方式,將隨機(jī)訪問的數(shù)據(jù)庫請求轉(zhuǎn)換為順序的日志IO,并通過Bu
    的頭像 發(fā)表于 12-06 09:30 ?632次閱讀
    聊聊日志即<b class='flag-5'>數(shù)據(jù)庫</b>

    redis機(jī)制原理

    Redis是一款高性能的開源內(nèi)存數(shù)據(jù)庫,用于存儲和檢索數(shù)據(jù)。在多線程或分布式環(huán)境中,需要實(shí)現(xiàn)并發(fā)控制來保證數(shù)據(jù)一致性和線程安全。Redis提供了一種簡單而高效的
    的頭像 發(fā)表于 12-04 11:08 ?1131次閱讀

    什么是JSON數(shù)據(jù)庫

    如何理解JSON數(shù)據(jù)庫?作為NoSQL數(shù)據(jù)庫的一種類型,JSON數(shù)據(jù)庫有哪些優(yōu)勢呢?JSON數(shù)據(jù)庫如何運(yùn)作,它為應(yīng)用程序開發(fā)者帶來了哪些價值呢?文章速覽:什么是JSON什么是JSON
    的頭像 發(fā)表于 12-02 08:04 ?779次閱讀
    什么是JSON<b class='flag-5'>數(shù)據(jù)庫</b>

    NoSQL 數(shù)據(jù)庫如何選型

    什么是NoSQL數(shù)據(jù)庫?為什么要使用NoSQL數(shù)據(jù)庫?鍵值數(shù)據(jù)庫內(nèi)存鍵值數(shù)據(jù)庫文檔數(shù)據(jù)庫列式數(shù)據(jù)庫
    的頭像 發(fā)表于 11-26 08:05 ?403次閱讀
    NoSQL <b class='flag-5'>數(shù)據(jù)庫</b>如何選型

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)—SQLserver數(shù)據(jù)庫被加密如何恢復(fù)數(shù)據(jù)?

    一臺服務(wù)器上的SQLserver數(shù)據(jù)庫被勒索病毒加密,無法正常使用。該服務(wù)器上部署有多個SQLserver數(shù)據(jù)庫,其中有2個數(shù)據(jù)庫及備份文件被加密,文件名被篡改,數(shù)據(jù)庫無法使用。
    的頭像 發(fā)表于 11-23 14:42 ?845次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)—SQLserver<b class='flag-5'>數(shù)據(jù)庫</b>被加密如何恢復(fù)<b class='flag-5'>數(shù)據(jù)</b>?

    數(shù)據(jù)庫數(shù)據(jù)恢復(fù)——MongoDB數(shù)據(jù)庫介紹和數(shù)據(jù)恢復(fù)案例

    MongoDB數(shù)據(jù)庫是文檔數(shù)據(jù)存儲,將文檔存儲在集合之中,不是像MySQL一樣的關(guān)系型數(shù)據(jù)庫。
    的頭像 發(fā)表于 11-08 15:04 ?817次閱讀
    <b class='flag-5'>數(shù)據(jù)庫</b><b class='flag-5'>數(shù)據(jù)</b>恢復(fù)——MongoDB<b class='flag-5'>數(shù)據(jù)庫</b>介紹和<b class='flag-5'>數(shù)據(jù)</b>恢復(fù)案例