0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

MySQL主從復(fù)制原理詳解

阿銘linux ? 來源:阿銘linux ? 2023-02-06 10:27 ? 次閱讀

什么是主從復(fù)制

簡單講,MySQL主從復(fù)制就是數(shù)據(jù)寫入一臺(tái)服務(wù)器(主服務(wù)器)后,同時(shí)還會(huì)額外寫入另外的服務(wù)器(從服務(wù)器)。也就是說數(shù)據(jù)會(huì)寫多份,這樣做的目的主要有兩個(gè):

1)備份數(shù)據(jù);

2)做負(fù)載均衡,對(duì)于寫來說沒有效果,但是對(duì)于讀是可以做到負(fù)載均衡的。

主從復(fù)制原理

22c8afbc-a528-11ed-bfe3-dac502259ad0.png

1)主上將所有變更事件記錄到binlog里

2)從發(fā)起請(qǐng)求連接主

3)主的binlog備份線程將binlog傳給從

4)從的I/O線程將binlog解析成自己的relay log

5)從的SQL線程根據(jù)relay log來執(zhí)行具體的SQL語句

MySQL主從復(fù)制是一個(gè)異步的復(fù)制過程,主庫發(fā)送更新事件到從庫,從庫讀取更新記錄,并執(zhí)行更新記錄,使得從庫的內(nèi)容與主庫保持一致。

概念解釋

Binlog:binary log,主庫中保存所有更新事件日志的二進(jìn)制文件。binlog是數(shù)據(jù)庫服務(wù)啟動(dòng)的一刻起,保存數(shù)據(jù)庫所有變更記錄(數(shù)據(jù)庫結(jié)構(gòu)和內(nèi)容)的文件。在主庫中,只要有更新事件出現(xiàn),就會(huì)被依次地寫入到binlog中,之后會(huì)推送到從庫中作為從庫進(jìn)行復(fù)制的數(shù)據(jù)源。

Binlog dump線程:每當(dāng)有從庫連接到主庫的時(shí)候,主庫都會(huì)創(chuàng)建一個(gè)線程然后發(fā)送binlog內(nèi)容到從庫。對(duì)于每一個(gè)即將發(fā)送給從庫的sql事件,binlog dump線程會(huì)將其鎖住。一旦該事件被線程讀取完之后,該鎖會(huì)被釋放,即使在該事件完全發(fā)送到從庫的時(shí)候,該鎖也會(huì)被釋放。

在從庫中,當(dāng)復(fù)制開始時(shí),從庫就會(huì)創(chuàng)建從庫I/O線程和從庫的SQL線程進(jìn)行復(fù)制處理。

從庫I/O線程:當(dāng)START SLAVE語句在從庫開始執(zhí)行之后,從庫創(chuàng)建一個(gè)I/O線程,該線程連接到主庫并請(qǐng)求主庫發(fā)送binlog里面的更新記錄到從庫上。從庫I/O線程讀取主庫的binlog輸出線程發(fā)送的更新并拷貝這些更新到本地文件,其中包括relay log文件。

從庫的SQL線程:從庫創(chuàng)建一個(gè)SQL線程,這個(gè)線程讀取從庫I/O線程寫到relay log的更新事件并執(zhí)行。

基于GTID的主從復(fù)制

1)什么是GTID

GTID(Global Transaction ID)是對(duì)于一個(gè)已提交事務(wù)的編號(hào),并且是一個(gè)全局唯一的編號(hào)。GTID實(shí)際上是由UUID+TID組成的。其中UUID是一個(gè)MySQL實(shí)例的唯一標(biāo)識(shí),保存在mysql數(shù)據(jù)目錄下的auto.cnf文件里。TID代表了該實(shí)例上已經(jīng)提交的事務(wù)數(shù)量,并且隨著事務(wù)提交單調(diào)遞增。下面是一個(gè)GTID的具體形式:3E11FA47-71CA-11E1-9E33-C80AA9429562:23

2)GTID的作用

根據(jù)GTID可以知道事務(wù)最初是在哪個(gè)實(shí)例上提交的,GTID的存在方便了Replication的Failover(故障切換)

3)GTID比傳統(tǒng)復(fù)制的優(yōu)勢(shì)

更簡單的實(shí)現(xiàn)failover,不用以前那樣在需要找log_file和log_Pos。更簡單的搭建主從復(fù)制。比傳統(tǒng)復(fù)制更加安全。GTID是連續(xù)沒有空洞的,因此主從庫出現(xiàn)數(shù)據(jù)沖突時(shí),可以用添加空事物的方式進(jìn)行跳過。

4)GTID的工作原理

① master更新數(shù)據(jù)時(shí),會(huì)在事務(wù)前產(chǎn)生GTID,一同記錄到binlog日志中。

② slave端的i/o線程將變更的binlog,寫入到本地的relay log中。

③ sql線程從relay log中獲取GTID,然后對(duì)比slave端的binlog是否有記錄。

④ 如果有記錄,說明該GTID的事務(wù)已經(jīng)執(zhí)行,slave會(huì)忽略。

⑤ 如果沒有記錄,slave就會(huì)從relay log中執(zhí)行該GTID的事務(wù),并記錄到binlog。

⑥ 在解析過程中會(huì)判斷是否有主鍵,如果有就用二級(jí)索引,如果沒有就用全部掃描。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 服務(wù)器
    +關(guān)注

    關(guān)注

    12

    文章

    8849

    瀏覽量

    84950
  • SQL
    SQL
    +關(guān)注

    關(guān)注

    1

    文章

    751

    瀏覽量

    43986
  • MySQL
    +關(guān)注

    關(guān)注

    1

    文章

    793

    瀏覽量

    26352
  • 線程
    +關(guān)注

    關(guān)注

    0

    文章

    502

    瀏覽量

    19614
  • binlog
    +關(guān)注

    關(guān)注

    0

    文章

    6

    瀏覽量

    1243

原文標(biāo)題:MySQL主從復(fù)制原理

文章出處:【微信號(hào):aming_linux,微信公眾號(hào):阿銘linux】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    Mysql如何實(shí)現(xiàn)雙向互為主從復(fù)制

    機(jī)器上得到的偏移量如果是基于GTID的主從復(fù)制 不用找binglog 和pos點(diǎn)master_auto_position=1;#加上這個(gè)參數(shù)就可以
    發(fā)表于 06-22 17:48

    基于二進(jìn)制安裝MySQL主從復(fù)制

    二進(jìn)制安裝MySQL實(shí)現(xiàn)主從復(fù)制
    發(fā)表于 03-10 09:43

    mysql主從復(fù)制

    mysql 主從復(fù)制
    發(fā)表于 04-28 14:30

    基于mycat的Mysql主從復(fù)制讀寫分離全攻略

    基于mycat的Mysql主從復(fù)制讀寫分離全攻略
    發(fā)表于 09-08 10:10 ?4次下載
    基于mycat的<b class='flag-5'>Mysql</b><b class='flag-5'>主從復(fù)制</b>讀寫分離全攻略

    利用MySQL進(jìn)行一主一從的主從復(fù)制

    本文講述了如何使用MyBatisPlus+ShardingSphereJDBC進(jìn)行讀寫分離,以及利用MySQL進(jìn)行一主一從的主從復(fù)制
    的頭像 發(fā)表于 07-28 09:47 ?976次閱讀

    一個(gè)操作把MySQL主從復(fù)制整崩了

    最近公司某項(xiàng)目上反饋mysql主從復(fù)制失敗,被運(yùn)維部門記了一次大過,影響到了項(xiàng)目的驗(yàn)收推進(jìn),那么究竟是什么原因?qū)е碌哪???b class='flag-5'>主從復(fù)制的原理又是什么呢?本文就對(duì)排查分析的過程做一個(gè)記錄。
    的頭像 發(fā)表于 05-11 11:14 ?495次閱讀
    一個(gè)操作把<b class='flag-5'>MySQL</b><b class='flag-5'>主從復(fù)制</b>整崩了

    聊聊RocketMQ的主從復(fù)制

    RocketMQ 主從復(fù)制是 RocketMQ 高可用機(jī)制之一,數(shù)據(jù)可以從主節(jié)點(diǎn)復(fù)制到一個(gè)或多個(gè)從節(jié)點(diǎn)。
    的頭像 發(fā)表于 07-04 09:42 ?564次閱讀
    聊聊RocketMQ的<b class='flag-5'>主從復(fù)制</b>

    什么是Redis主從復(fù)制

    Redis主從復(fù)制 來自靈魂的拷問:什么是Redis主從復(fù)制? 簡言之就是: 主對(duì)外從對(duì)內(nèi),主可寫從不可寫 主掛了,從不可為主 看下面的圖加深下理解: 對(duì),你沒看錯(cuò),Redis主從復(fù)制沒有動(dòng)態(tài)選舉
    的頭像 發(fā)表于 10-09 15:09 ?378次閱讀
    什么是Redis<b class='flag-5'>主從復(fù)制</b>

    mysql主從復(fù)制三種模式

    MySQL主從復(fù)制是一種常見的數(shù)據(jù)同步方式,它可以實(shí)現(xiàn)將一個(gè)數(shù)據(jù)庫的更改同步到其他多個(gè)數(shù)據(jù)庫的功能。主從復(fù)制可以提高數(shù)據(jù)庫的可用性和性能,以及提供故障恢復(fù)和數(shù)據(jù)備份的支持。在MySQL
    的頭像 發(fā)表于 11-16 14:04 ?1340次閱讀

    mysql如何實(shí)現(xiàn)主從復(fù)制的具體流程

    主從復(fù)制MySQL數(shù)據(jù)庫中常用的數(shù)據(jù)復(fù)制技術(shù)之一,它的主要目的是將一個(gè)數(shù)據(jù)庫服務(wù)器上的數(shù)據(jù)復(fù)制到其他服務(wù)器上,以實(shí)現(xiàn)數(shù)據(jù)的備份、高可用和分布式部署。下面將詳細(xì)介紹
    的頭像 發(fā)表于 11-16 14:10 ?660次閱讀

    mysql主從復(fù)制主要有幾種模式

    MySQL主從復(fù)制MySQL數(shù)據(jù)庫中常用的一種數(shù)據(jù)復(fù)制方式,用于實(shí)現(xiàn)數(shù)據(jù)的備份、負(fù)載均衡、故障恢復(fù)等目的。主從復(fù)制主要有以下幾種模式: 異
    的頭像 發(fā)表于 11-16 14:15 ?1092次閱讀

    mysql主從復(fù)制的原理

    MySQL主從復(fù)制是一種數(shù)據(jù)庫復(fù)制技術(shù),它允許將一個(gè)MySQL數(shù)據(jù)庫的更新操作自動(dòng)復(fù)制到其他MySQL
    的頭像 發(fā)表于 11-16 14:18 ?431次閱讀

    mysql主從復(fù)制 混合類型的復(fù)制

    MySQL主從復(fù)制是一種常用的數(shù)據(jù)復(fù)制技術(shù),可以實(shí)現(xiàn)數(shù)據(jù)從一個(gè)MySQL服務(wù)器(主服務(wù)器)復(fù)制到另一個(gè)M
    的頭像 發(fā)表于 11-16 14:20 ?499次閱讀

    mysql主從復(fù)制數(shù)據(jù)不一致怎么辦

    MySQL主從復(fù)制是一種常用的數(shù)據(jù)復(fù)制技術(shù),用于實(shí)現(xiàn)數(shù)據(jù)的實(shí)時(shí)同步和分布式部署。然而,在實(shí)際應(yīng)用中,主從復(fù)制過程中出現(xiàn)數(shù)據(jù)不一致的情況也是很常見的。本文將從以下幾個(gè)方面介紹
    的頭像 發(fā)表于 11-16 14:35 ?2067次閱讀

    配置MySQL主從復(fù)制和讀寫分離

    配置MySQL主從復(fù)制和讀寫分離
    的頭像 發(fā)表于 10-23 11:44 ?68次閱讀
    配置<b class='flag-5'>MySQL</b><b class='flag-5'>主從復(fù)制</b>和讀寫分離