MySQL配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的
不知道大家想過這個問題沒有?如果配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的,因為在數(shù)據(jù)雙活的設(shè)計方案中,這可以算是方案的核心設(shè)計思想之一。
如果主庫觸發(fā)SQL語句:
insert into test_data(name) values(‘a(chǎn)a');
那么Master1生成binlog,推送數(shù)據(jù)變化到Master2,在Master2上面生成relay log,然后交由sql thread進行變更重放,反之也是類似的流程,整個流程可以這樣描述。
如果Master2消費了relay的數(shù)據(jù),然后會產(chǎn)生binlog(log_slave_updates默認開啟),這個時候產(chǎn)生的binlog會繼續(xù)推送到Master1消費,然后來來回回推送,一套insert語句就無窮無盡了,顯然這種設(shè)計是不合理的,MySQL也肯定不會這么做。
那么問題的關(guān)鍵的部分就是:Master2是否推送了先前的binlog到Master1?
a) 如果推送了,Master1是如何過濾,避免后續(xù)無限循環(huán)
b) 如果沒有推送,Master2是如何過濾的
如果要理解這個過程,我們就需要模擬測試,查看數(shù)據(jù)流轉(zhuǎn)過程中的binlog情況,可以參考這個流程。
1) Master1的binlog
2) Master2的 relay log
3) Master的binlog
很快就部署好了一套主從環(huán)境,然后添加change master to 就快速搭建好了一套測試的雙主環(huán)境。
為了盡可能看到完整的binlog事件信息,我們開啟參數(shù)binlog_rows_query_log_events
在Master1觸發(fā)語句:
insert into test_data(name) values(‘gg');
得到的binlog事件如下,可以清楚的看到相關(guān)的SQL語句。
在Master2端,我們查看binlog的情況,在開啟binlog_rows_query_log_events的前提下會看到明顯少了事件:Rows_query.
此時需要思考的是,在這個過程中偏移量是否發(fā)生了變化,從Master1產(chǎn)生的binlog到Master的relay log,如果通過mysqlbinlog去解析,得到的偏移量情況都是一模一樣,而在Master2消費后,產(chǎn)生了相關(guān)的binlog信息。
問題的關(guān)鍵就在這里,在Maser2里面是通過Server_id來標(biāo)注了數(shù)據(jù)的源頭,所以在這里就稱為整個數(shù)據(jù)流轉(zhuǎn)的終點了,也就意味著數(shù)據(jù)復(fù)制的時候是按照server_id來進行U過濾的,每個Master端只會傳送自己相關(guān)的binlog信息。
如果從這個角度來說,MySQL對于復(fù)制中的server_id如此重要的一個原因就是基于此。
而如果換一個角度,看待基于偏移量的異步復(fù)制,其實也可以得到類似的信息。
這是Master1觸發(fā)insert語句后的binlog細節(jié)。
這是Master2接受實時數(shù)據(jù)后的binlog細節(jié)。
其實看到這里,還存在一個問題,那就是在偏移量模式下,如果需要一個數(shù)據(jù)變更操作在Master2丟失了,那么是沒有辦法進行回溯的。
而基于GTID模式可以唯一性標(biāo)識全局事務(wù),那么哪怕對這個操作進行了重復(fù)應(yīng)用,哪怕是DDL語句,操作的影響行數(shù)也是0.
我們對一個已經(jīng)執(zhí)行的操作進行再次應(yīng)用,看看MySQL是否會自動舍棄該類操作。
mysql> SET @@SESSION.GTID_NEXT= '6fb744dd-05dd-11ea-ada7-52540043a8b5:6'; Query OK, 0 rows affected (0.00 sec) mysql> use `test`; create table test_data (id int primary key auto_increment,name varchar(30)); Database changed Query OK, 0 rows affected (0.00 sec)
查看show binlog events
發(fā)現(xiàn)這個過程不會產(chǎn)生額外的binlog。
所以基于此,我們也基本明確了數(shù)據(jù)回環(huán)解決方法的一個設(shè)計思想,那就是如何讓MySQL能夠識別出那些已經(jīng)應(yīng)用的事務(wù)數(shù)據(jù),我想GTID是一個答案,而且分布式ID不用,這是MySQL內(nèi)部的處理機制,而且是MySQL能夠識別的方式。
以上就是MySQL配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的的詳細內(nèi)容,更多關(guān)于MySQL 避免數(shù)據(jù)回環(huán)沖突的資料請關(guān)注本站其它相關(guān)文章!
版權(quán)聲明:本站文章來源標(biāo)注為YINGSOO的內(nèi)容版權(quán)均為本站所有,歡迎引用、轉(zhuǎn)載,請保持原文完整并注明來源及原文鏈接。禁止復(fù)制或仿造本網(wǎng)站,禁止在非www.sddonglingsh.com所屬的服務(wù)器上建立鏡像,否則將依法追究法律責(zé)任。本站部分內(nèi)容來源于網(wǎng)友推薦、互聯(lián)網(wǎng)收集整理而來,僅供學(xué)習(xí)參考,不代表本站立場,如有內(nèi)容涉嫌侵權(quán),請聯(lián)系alex-e#qq.com處理。