Docker部署Mysql集群的實(shí)現(xiàn)
單節(jié)點(diǎn)數(shù)據(jù)庫(kù)的弊病
- 大型互聯(lián)網(wǎng)程序用戶群體龐大,所以架構(gòu)必須要特殊設(shè)計(jì)
- 單節(jié)點(diǎn)的數(shù)據(jù)庫(kù)無(wú)法滿足性能上的要求
- 單節(jié)點(diǎn)的數(shù)據(jù)庫(kù)沒有冗余設(shè)計(jì),無(wú)法滿足高可用
單節(jié)點(diǎn)MySQL的性能瓶領(lǐng)頸
2016年春節(jié)微信紅包巨大業(yè)務(wù)量,數(shù)據(jù)庫(kù)承受巨大負(fù)載
常見MySQL集群方案
mysql 集群方案介紹，建議使用pxc，因?yàn)槿跻恢滦詴?huì)有問(wèn)題，比如說(shuō)a節(jié)點(diǎn)數(shù)據(jù)庫(kù)顯示我購(gòu)買成功，b 節(jié)點(diǎn)數(shù)據(jù)庫(kù)顯示沒有成功，這就麻煩了，pxc 方案是在全部節(jié)點(diǎn)都寫入成功之后才會(huì)告訴你成功，是可讀可寫雙向同步的，但是replication是單向的，不同節(jié)點(diǎn)的數(shù)據(jù)庫(kù)之間都會(huì)開放端口進(jìn)行通訊，如果從防火墻的這個(gè)端口關(guān)閉，pxc就不會(huì)同步成功，也不會(huì)返給你成功了。
Replication
- 速度快，但僅能保證弱一致性，適用于保存價(jià)值不高的數(shù)據(jù)，比如日志、帖子、新聞等。
- 采用master-slave結(jié)構(gòu)，在master寫入會(huì)同步到slave，能從slave讀出；但在slave寫入無(wú)法同步到master。
- 采用異步復(fù)制，master寫入成功就向客戶端返回成功，但是同步slave可能失敗，會(huì)造成無(wú)法從slave讀出的結(jié)果。
PXC (Percona XtraDB Cluster)
- 速度慢，但能保證強(qiáng)一致性，適用于保存價(jià)值較高的數(shù)據(jù)，比如訂單、客戶、支付等。
- 數(shù)據(jù)同步是雙向的，在任一節(jié)點(diǎn)寫入數(shù)據(jù)，都會(huì)同步到其他所有節(jié)點(diǎn)，在任何節(jié)點(diǎn)上都能同時(shí)讀寫。
- 采用同步復(fù)制，向任一節(jié)點(diǎn)寫入數(shù)據(jù)，只有所有節(jié)點(diǎn)都同步成功后，才會(huì)向客戶端返回成功。事務(wù)在所有節(jié)點(diǎn)要么同時(shí)提交，要么不提交。
建議PXC使用PerconaServer (MySQL改進(jìn)版，性能提升很大)
PXC的數(shù)據(jù)強(qiáng)一致性
同步復(fù)制,事務(wù)在所有集群節(jié)點(diǎn)要么同時(shí)提交,要么不提交 Replication采用異步復(fù)制,無(wú)法保證數(shù)據(jù)的一致性
PXC集群安裝介紹
在Docker中安裝PXC集群，使用Docker倉(cāng)庫(kù)中的PXC官方鏡像：https://hub.docker.com/r/percona/percona-xtradb-cluster
1、從docker官方倉(cāng)庫(kù)中拉下PXC鏡像：
docker pull percona/percona-xtradb-cluster
或者本地安裝
docker load < /home/soft/pxc.tar.gz
安裝完成：
[root@localhost ~]# docker pull percona/percona-xtradb-cluster Using default tag: latest Trying to pull repository docker.io/percona/percona-xtradb-cluster ... latest: Pulling from docker.io/percona/percona-xtradb-cluster ff144d3c0ab1: Pull complete eafdff1524b5: Pull complete c281665399a2: Pull complete c27d896755b2: Pull complete c43c51f1cccf: Pull complete 6eb96f41c54d: Pull complete 4966940ec632: Pull complete 2bafadcea292: Pull complete 3c2c0e21b695: Pull complete 52a8c2e9228e: Pull complete f3f28eb1ce04: Pull complete d301ece75f56: Pull complete 3d24904bec3c: Pull complete 1053c2982c37: Pull complete Digest: sha256:17c64dacbb9b62bd0904b4ff80dd5973b2d2d931ede2474170cbd642601383bd Status: Downloaded newer image for docker.io/percona/percona-xtradb-cluster:latest [root@localhost ~]# docker images REPOSITORY TAG IMAGE ID CREATED SIZE docker.io/percona/percona-xtradb-cluster latest 70b3670450ef 2 months ago 408 MB
2、重命名鏡像：（名稱太長(zhǎng)，重命名一下）
docker tag percona/percona-xtradb-cluster:latest pxc
然后原來(lái)的鏡像就可以刪除掉了
[root@localhost ~]# docker images REPOSITORY TAG IMAGE ID CREATED SIZE docker.io/percona/percona-xtradb-cluster latest 70b3670450ef 2 months ago 408 MB pxc latest 70b3670450ef 2 months ago 408 MB docker.io/java latest d23bdf5b1b1b 2 years ago 643 MB [root@localhost ~]# docker rmi docker.io/percona/percona-xtradb-cluster Untagged: docker.io/percona/percona-xtradb-cluster:latest Untagged: docker.io/percona/percona-xtradb-cluster@sha256:17c64dacbb9b62bd0904b4ff80dd5973b2d2d931ede2474170cbd642601383bd [root@localhost ~]# docker images REPOSITORY TAG IMAGE ID CREATED SIZE pxc latest 70b3670450ef 2 months ago 408 MB docker.io/java latest d23bdf5b1b1b 2 years ago 643 MB
3、出于安全考慮，給PXC集群創(chuàng)建Docker內(nèi)部網(wǎng)絡(luò)
# 創(chuàng)建網(wǎng)段 docker network create --subnet=172.18.0.0/24 net1 # 查看網(wǎng)段 docker network inspect net1 # 刪除網(wǎng)段 # docker network rm net1
4、創(chuàng)建Docker卷：
使用Docker時(shí)，業(yè)務(wù)數(shù)據(jù)應(yīng)保存在宿主機(jī)中，采用目錄映射，這樣可以使數(shù)據(jù)與容器獨(dú)立。但是容器中的PXC無(wú)法直接使用映射目錄，解決辦法是采用Docker卷來(lái)映射
# 創(chuàng)建名稱為v1的數(shù)據(jù)卷，--name可以省略 docker volume create --name v1
查看數(shù)據(jù)卷
docker inspect v1
結(jié)果：
[root@localhost ~]# docker inspect v1
[
{
"Driver": "local",
"Labels": {},
"Mountpoi
刪除數(shù)據(jù)卷
docker volume rm v1
創(chuàng)建5個(gè)數(shù)據(jù)卷
# 創(chuàng)建5個(gè)數(shù)據(jù)卷 docker volume create --name v1 docker volume create --name v2 docker volume create --name v3 docker volume create --name v4 docker volume create --name v5
5、創(chuàng)建5個(gè)PXC容器：
# 創(chuàng)建5個(gè)PXC容器構(gòu)成集群 # 第一個(gè)節(jié)點(diǎn) docker run -d -p 3306:3306 -e MYSQL_ROOT_PASSWORD=abc123456 -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=abc123456 -v v1:/var/lib/mysql --name=node1 --network=net1 --ip 172.18.0.2 pxc # 在第一個(gè)節(jié)點(diǎn)啟動(dòng)后要等待一段時(shí)間，等候mysql啟動(dòng)完成。 # 第二個(gè)節(jié)點(diǎn) docker run -d -p 3307:3306 -e MYSQL_ROOT_PASSWORD=abc123456 -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=abc123456 -e CLUSTER_JOIN=node1 -v v2:/var/lib/mysql --name=node2 --net=net1 --ip 172.18.0.3 pxc # 第三個(gè)節(jié)點(diǎn) docker run -d -p 3308:3306 -e MYSQL_ROOT_PASSWORD=abc123456 -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=abc123456 -e CLUSTER_JOIN=node1 -v v3:/var/lib/mysql --name=node3 --net=net1 --ip 172.18.0.4 pxc # 第四個(gè)節(jié)點(diǎn) docker run -d -p 3309:3306 -e MYSQL_ROOT_PASSWORD=abc123456 -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=abc123456 -e CLUSTER_JOIN=node1 -v v4:/var/lib/mysql --name=node4 --net=net1 --ip 172.18.0.5 pxc # 第五個(gè)節(jié)點(diǎn) docker run -d -p 3310:3306 -e MYSQL_ROOT_PASSWORD=abc123456 -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=abc123456 -e CLUSTER_JOIN=node1 -v v5:/var/lib/mysql --name=node5 --net=net1 --ip 172.18.0.6 pxc
查看：
[root@localhost ~]# docker ps CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES f4708ce32209 pxc "/entrypoint.sh " About a minute ago Up About a minute 4567-4568/tcp, 0.0.0.0:3309->3306/tcp node4 bf612f9586bc pxc "/entrypoint.sh " 17 minutes ago Up 17 minutes 4567-4568/tcp, 0.0.0.0:3310->3306/tcp node5 9fdde5e6becd pxc "/entrypoint.sh " 17 minutes ago Up 17 minutes 4567-4568/tcp, 0.0.0.0:3308->3306/tcp node3 edd5794175b6 pxc "/entrypoint.sh " 18 minutes ago Up 18 minutes 4567-4568/tcp, 0.0.0.0:3307->3306/tcp node2 33d842de7f42 pxc "/entrypoint.sh " 21 minutes ago Up 21 minutes 0.0.0.0:3306->3306/tcp, 4567-4568/tcp node1
數(shù)據(jù)庫(kù)負(fù)載均衡的必要性
雖然搭建了集群,但是不使用數(shù)據(jù)庫(kù)負(fù)載均衡,單節(jié)點(diǎn)處理所有請(qǐng)求，負(fù)載高，性能差
將請(qǐng)求均勻地發(fā)送給集群中的每一個(gè)節(jié)點(diǎn)。
- 所有請(qǐng)求發(fā)送給單一節(jié)點(diǎn)，其負(fù)載過(guò)高，性能很低，而其他節(jié)點(diǎn)卻很空閑。
- 使用Haproxy做負(fù)載均衡，可以將請(qǐng)求均勻地發(fā)送給每個(gè)節(jié)點(diǎn)，單節(jié)點(diǎn)負(fù)載低，性能好
負(fù)載均衡中間件對(duì)比
負(fù)載均衡首先是數(shù)據(jù)庫(kù)的集群，加入5個(gè)集群，每次請(qǐng)求都是第一個(gè)的話，有可能第一個(gè)數(shù)據(jù)庫(kù)就掛掉了，所以更優(yōu)的方案是對(duì)不同的節(jié)點(diǎn)都進(jìn)行請(qǐng)求，這就需要有中間件進(jìn)行轉(zhuǎn)發(fā)，比較好的中間件有nginx，haproxy等，因nginx 支持插件，但是剛剛支持了tcp/ip 協(xié)議，haproxy 是一個(gè)老牌的中間轉(zhuǎn)發(fā)件。如果要用haproxy的話，可以從官方下載鏡像，然后呢對(duì)鏡像進(jìn)行配置（自己寫好配置文件，因?yàn)檫@個(gè)鏡像是沒有配置文件的，配置好之后再運(yùn)行鏡像的時(shí)候進(jìn)行文件夾的映射，配置文件開放3306（數(shù)據(jù)庫(kù)請(qǐng)求，然后根據(jù)check心跳檢測(cè)訪問(wèn)不同的數(shù)據(jù)庫(kù)，8888 對(duì)數(shù)據(jù)庫(kù)集群進(jìn)行監(jiān)控））。配置文件里面設(shè)置用戶（用戶在數(shù)據(jù)庫(kù)進(jìn)行心跳檢測(cè)，判斷哪個(gè)數(shù)據(jù)庫(kù)節(jié)點(diǎn)是空閑的，然后對(duì)空閑的進(jìn)行訪問(wèn)），還有各種算法（比如輪訓(xùn)），最大連接數(shù)，時(shí)間等，還有對(duì)集群的監(jiān)控。配置文件寫好以后運(yùn)行這個(gè)鏡像，鏡像運(yùn)行成功后進(jìn)入容器啟動(dòng)配置文件 。其實(shí)haprocy返回的也是一個(gè)數(shù)據(jù)庫(kù)實(shí)例（但是并不存儲(chǔ)任何的數(shù)據(jù)，只是轉(zhuǎn)發(fā)請(qǐng)求），這個(gè)實(shí)例用來(lái)check其他節(jié)點(diǎn)。
安裝Haproxy
1、從Docker倉(cāng)庫(kù)拉取haproxy鏡像：https://hub.docker.com/_/haproxy
docker pull haproxy
[root@localhost ~]# docker images REPOSITORY TAG IMAGE ID CREATED SIZE docker.io/haproxy latest 11fa4d7ff427 11 days ago 72.2 MB
2、創(chuàng)建Haproxy配置文件。供Haproxy容器使用（docker中未生成配置文件，我們需要在宿主機(jī)中自己創(chuàng)建配置文件）
配置文件詳情參考：https://www.cnblogs.com/wyt007/p/10829184.html
# 啟動(dòng)容器時(shí)使用目錄映射技術(shù)使容器讀取該配置文件 touch /home/soft/haproxy/haproxy.cfg
haproxy.cfg
# haproxy.cfg global #工作目錄 chroot /usr/local/etc/haproxy #日志文件，使用rsyslog服務(wù)中l(wèi)ocal5日志設(shè)備（/var/log/local5），等級(jí)info log 127.0.0.1 local5 info #守護(hù)進(jìn)程運(yùn)行 daemon defaults log global mode http #日志格式 option httplog #日志中不記錄負(fù)載均衡的心跳檢測(cè)記錄 option dontlognull #連接超時(shí)（毫秒） timeout connect 5000 #客戶端超時(shí)（毫秒） timeout client 50000 #服務(wù)器超時(shí)（毫秒） timeout server 50000 #監(jiān)控界面 listen admin_stats #監(jiān)控界面的訪問(wèn)的IP和端口 bind 0.0.0.0:8888 #訪問(wèn)協(xié)議 mode http #URI相對(duì)地址 stats uri /dbs #統(tǒng)計(jì)報(bào)告格式 stats realm Global\ statistics #登陸帳戶信息 stats auth admin:abc123456 #數(shù)據(jù)庫(kù)負(fù)載均衡 listen proxy-mysql #訪問(wèn)的IP和端口 bind 0.0.0.0:3306 #網(wǎng)絡(luò)協(xié)議 mode tcp #負(fù)載均衡算法（輪詢算法） #輪詢算法：roundrobin #權(quán)重算法：static-rr #最少連接算法：leastconn #請(qǐng)求源IP算法：source balance roundrobin #日志格式 option tcplog #在MySQL中創(chuàng)建一個(gè)沒有權(quán)限的haproxy用戶，密碼為空。Haproxy使用這個(gè)賬戶對(duì)MySQL數(shù)據(jù)庫(kù)心跳檢測(cè) option mysql-check user haproxy server MySQL_1 172.18.0.2:3306 check weight 1 maxconn 2000 server MySQL_2 172.18.0.3:3306 check weight 1 maxconn 2000 server MySQL_3 172.18.0.4:3306 check weight 1 maxconn 2000 server MySQL_4 172.18.0.5:3306 check weight 1 maxconn 2000 server MySQL_5 172.18.0.6:3306 check weight 1 maxconn 2000 #使用keepalive檢測(cè)死鏈 option tcpka
3、在數(shù)據(jù)庫(kù)集群中創(chuàng)建空密碼、無(wú)權(quán)限用戶haproxy，來(lái)供Haproxy對(duì)MySQL數(shù)據(jù)庫(kù)進(jìn)行心跳檢測(cè)
create user 'haproxy'@'%' identified by '';
4、創(chuàng)建Haproxy容器(name=h1的原因是為了高可用)
# 這里要加 --privileged docker run -it -d -p 4001:8888 -p 4002:3306 -v /home/soft/haproxy:/usr/local/etc/haproxy --name h1 --net=net1 --ip 172.18.0.7 --privileged haproxy
5、進(jìn)入容器
docker exec -it h1 bash
6、在容器bash中啟動(dòng)Haproxy
haproxy -f /usr/local/etc/haproxy/haproxy.cfg
接下來(lái)便可以在瀏覽器中打開Haproxy監(jiān)控界面，端口4001，在配置文件中定義有用戶名admin，密碼abc123456。
我這邊訪問(wèn)的是http://192.168.63.144:4001/dbs，并且要使用用戶名密碼進(jìn)行登錄（小插曲，使用的是Basic登錄，我的Chrome不知為何被屏蔽了，我最后用的火狐）
這時(shí)候我們手動(dòng)掛掉一個(gè)Docker節(jié)點(diǎn)，看一下變化（我們會(huì)發(fā)現(xiàn)已經(jīng)顯示掛掉了）
8、Haproxy不存儲(chǔ)數(shù)據(jù)，只轉(zhuǎn)發(fā)數(shù)據(jù)。可以在數(shù)據(jù)庫(kù)中建立Haproxy的連接，端口4002，用戶名和密碼為數(shù)據(jù)庫(kù)集群的用戶名和密碼
為什么要采用雙機(jī)熱備
單節(jié)點(diǎn)Haproxy不具備高可用,必須要有冗余設(shè)計(jì)
雙機(jī)就是兩個(gè)請(qǐng)求處理程序，比如兩個(gè)haproxy，當(dāng)一個(gè)掛掉的時(shí)候，另外 一個(gè)可以頂上。熱備我理解就是keepalive。在haproxy 容器中安裝keepalive。
虛擬IP地址
linux系統(tǒng)可以在一個(gè)網(wǎng)卡中定義多個(gè)IP地址，把這些地址分配給多個(gè)應(yīng)用程序，這些地址就是虛擬IP，Haproxy的雙機(jī)熱備方案最關(guān)鍵的技術(shù)就是虛擬IP。
關(guān)鍵就是虛擬ip，定義一個(gè)虛擬ip，然后比如兩個(gè)haproxy分別安裝keepalive鏡像，因?yàn)閔aproxy是ubuntu系統(tǒng)的，所以安裝用apt-get，keepalive是作用是搶占虛擬ip，搶到的就是主服務(wù)器，沒有搶到的就是備用服務(wù)器，然后兩個(gè)keepalive進(jìn)行心跳檢測(cè)（就是創(chuàng)建一個(gè)用戶到對(duì)方那里試探，看是否還活著，mysql的集群之間也是心跳檢測(cè)），如果 掛掉搶占ip。所以在啟動(dòng)keepalive 之前首先要編輯好他的配置文件，怎么搶占，權(quán)重是什么，虛擬ip是什么，創(chuàng)建的用戶交什么。配置完啟動(dòng)完以后可以ping一下看是否正確，然后將虛擬ip映射到局域網(wǎng)的ip
利用Keepalived實(shí)現(xiàn)雙機(jī)熱備
- 定義虛擬IP
- 在Docker中啟動(dòng)兩個(gè)Haproxy容器，每個(gè)容器中還需要安裝Keepalived程序（以下簡(jiǎn)稱KA）
- 兩個(gè)KA會(huì)爭(zhēng)搶虛擬IP，一個(gè)搶到后，另一個(gè)沒搶到就會(huì)等待，搶到的作為主服務(wù)器，沒搶到的作為備用服務(wù)器
- 兩個(gè)KA之間會(huì)進(jìn)行心跳檢測(cè)，如果備用服務(wù)器沒有受到主服務(wù)器的心跳響應(yīng)，說(shuō)明主服務(wù)器發(fā)生故障，那么備用服務(wù)器就可以爭(zhēng)搶虛擬IP，繼續(xù)工作
- 我們向虛擬IP發(fā)送數(shù)據(jù)庫(kù)請(qǐng)求，一個(gè)Haproxy掛掉，可以有另一個(gè)接替工作
Нaproxy雙機(jī)熱備方案
Docker中創(chuàng)建兩個(gè)Haproxy，并通過(guò)Keepalived搶占Docker內(nèi)地虛擬IP
Docker內(nèi)的虛擬IP不能被外網(wǎng)，所以需要借助宿主機(jī)Keepalived映射成外網(wǎng)可以訪問(wèn)地虛擬IP
安裝Keepalived
1、進(jìn)入Haproxy容器，安裝Keepalived：
$ docker exec -it h1 bash apt-get update apt-get install keepalived
2、Keepalived配置文件(Keepalived.conf)：
Keepalived的配置文件是/etc/keepalived/keepalived.conf
# vim /etc/keepalived/keepalived.conf
vrrp_instance VI_1 {
state MASTER # Keepalived的身份（MASTER主服務(wù)要搶占IP，BACKUP備服務(wù)器不會(huì)搶占IP）。
interface eth0 # docker網(wǎng)卡設(shè)備，虛擬IP所在
virtual_router_id 51 # 虛擬路由標(biāo)識(shí)，MASTER和BACKUP的虛擬路由標(biāo)識(shí)必須一致。從0～255
priority 100 # MASTER權(quán)重要高于BACKUP數(shù)字越大優(yōu)先級(jí)越高
advert_int 1 # MASTER和BACKUP節(jié)點(diǎn)同步檢查的時(shí)間間隔，單位為秒，主備之間必須一致
authentication { # 主從服務(wù)器驗(yàn)證方式。主備必須使用相同的密碼才能正常通信
auth_type PASS
auth_pass 123456
}
virtual_ipaddress { # 虛擬IP?？梢栽O(shè)置多個(gè)虛擬IP地址，每行一個(gè)
172.18.0.201
}
}
3、啟動(dòng)Keepalived
service keepalived start
啟動(dòng)成功后，通過(guò)ip a可以查看網(wǎng)卡中虛擬IP是否成功，另外可以在宿主機(jī)中ping成功虛擬IP172.18.0.201
4、可以按照以上步驟，再另外創(chuàng)建一個(gè)Haproxy容器，注意映射的宿主機(jī)端口不能重復(fù)，Haproxy配置一樣。然后在容器中安裝Keepalived，配置也基本一樣（可以修改優(yōu)先權(quán)重）。這樣便基本實(shí)現(xiàn)了Haproxy雙機(jī)熱備方案
命令如下：
創(chuàng)建Haproxy容器(name=h2的原因是為了高可用)
# 這里要加 --privileged docker run -it -d -p 4003:8888 -p 4004:3306 -v /home/soft/haproxy:/usr/local/etc/haproxy --name h2 --net=net1 --ip 172.18.0.8 --privileged haproxy
進(jìn)入容器
docker exec -it h2 bash
在容器bash中啟動(dòng)Haproxy
haproxy -f /usr/local/etc/haproxy/haproxy.cfg
接下來(lái)便可以在瀏覽器中打開Haproxy監(jiān)控界面，端口4003，在配置文件中定義有用戶名admin，密碼abc123456。
我這邊訪問(wèn)的是http://192.168.63.144:4003/dbs，并且要使用用戶名密碼進(jìn)行登錄（小插曲，使用的是Basic登錄，我的Chrome不知為何被屏蔽了，我最后用的火狐）
安裝Keepalived：
apt-get update apt-get install keepalived
Keepalived配置文件(Keepalived.conf)：
Keepalived的配置文件是/etc/keepalived/keepalived.conf
# vim /etc/keepalived/keepalived.conf
vrrp_instance VI_1 {
state MASTER # Keepalived的身份（MASTER主服務(wù)要搶占IP，BACKUP備服務(wù)器不會(huì)搶占IP）。
interface eth0 # docker網(wǎng)卡設(shè)備，虛擬IP所在
virtual_router_id 51 # 虛擬路由標(biāo)識(shí)，MASTER和BACKUP的虛擬路由標(biāo)識(shí)必須一致。從0～255
priority 100 # MASTER權(quán)重要高于BACKUP數(shù)字越大優(yōu)先級(jí)越高
advert_int 1 # MASTER和BACKUP節(jié)點(diǎn)同步檢查的時(shí)間間隔，單位為秒，主備之間必須一致
authentication { # 主從服務(wù)器驗(yàn)證方式。主備必須使用相同的密碼才能正常通信
auth_type PASS
auth_pass 123456
}
virtual_ipaddress { # 虛擬IP?？梢栽O(shè)置多個(gè)虛擬IP地址，每行一個(gè)
172.18.0.201
}
}
啟動(dòng)Keepalived
service keepalived start
啟動(dòng)成功后，通過(guò)ip a可以查看網(wǎng)卡中虛擬IP是否成功，另外可以在宿主機(jī)中ping成功虛擬IP172.18.0.201
實(shí)現(xiàn)外網(wǎng)訪問(wèn)虛擬IP
查看當(dāng)前局域網(wǎng)IP分配情況：
yum install nmap -y nmap -sP 192.168.1.0/24
在宿主機(jī)中安裝Keepalived
yum install keepalived
宿主機(jī)Keepalived配置如下(/etc/keepalived/keepalived.conf)：
vrrp_instance VI_1 {
state MASTER
#這里是宿主機(jī)的網(wǎng)卡，可以通過(guò)ip a查看當(dāng)前自己電腦上用的網(wǎng)卡名是哪個(gè)
interface ens33
virtual_router_id 100
priority 100
advert_int 1
authentication {
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
#這里是指定的一個(gè)宿主機(jī)上的虛擬ip，一定要和宿主機(jī)網(wǎng)卡在同一個(gè)網(wǎng)段，
#我的宿主機(jī)網(wǎng)卡ip是192.168.63.144，所以指定虛擬ip是160
192.168.63.160
}
}
#接受監(jiān)聽數(shù)據(jù)來(lái)源的端口，網(wǎng)頁(yè)入口使用
virtual_server 192.168.63.160 8888 {
delay_loop 3
lb_algo rr
lb_kind NAT
persistence_timeout 50
protocol TCP
#把接受到的數(shù)據(jù)轉(zhuǎn)發(fā)給docker服務(wù)的網(wǎng)段及端口，由于是發(fā)給docker服務(wù)，所以和docker服務(wù)數(shù)據(jù)要一致
real_server 172.18.0.201 8888 {
weight 1
}
}
#接受數(shù)據(jù)庫(kù)數(shù)據(jù)端口，宿主機(jī)數(shù)據(jù)庫(kù)端口是3306，所以這里也要和宿主機(jī)數(shù)據(jù)接受端口一致
virtual_server 192.168.63.160 3306 {
delay_loop 3
lb_algo rr
lb_kind NAT
persistence_timeout 50
protocol TCP
#同理轉(zhuǎn)發(fā)數(shù)據(jù)庫(kù)給服務(wù)的端口和ip要求和docker服務(wù)中的數(shù)據(jù)一致
real_server 172.18.0.201 3306 {
weight 1
}
}
啟動(dòng)Keepalived服務(wù)
service keepalived start #service keepalived status #service keepalived stop
之后其他電腦便可以通過(guò)虛擬IP192.168.63.160的8888和3306端口來(lái)訪問(wèn)宿主機(jī)Docker中的172.18.0.201的相應(yīng)端口。
暫停PXC集群的辦法
vi /etc/sysctl.conf #文件中添加net.ipv4.ip_forward=1這個(gè)配置 systemctl restart network
然后把虛擬機(jī)掛起
熱備份數(shù)據(jù)
冷備份
- 冷備份是關(guān)閉數(shù)據(jù)庫(kù)時(shí)候的備份方式，通常做法是拷貝數(shù)據(jù)文件
- 是簡(jiǎn)單安全的一種備份方式，不能在數(shù)據(jù)庫(kù)運(yùn)行時(shí)備份。
- 大型網(wǎng)站無(wú)法做到關(guān)閉業(yè)務(wù)備份數(shù)據(jù),所以冷備份不是最佳選擇
熱備份
熱備份是在系統(tǒng)運(yùn)行狀態(tài)下備份數(shù)據(jù)
MySQL常見的熱備份有LVM和XtraBackup兩種方案
- LVM：linux的分區(qū)備份命令，可以備份任何數(shù)據(jù)庫(kù)；但是會(huì)對(duì)數(shù)據(jù)庫(kù)加鎖，只能讀?。欢颐顝?fù)雜
- XtraBackup：不需要鎖表，而且免費(fèi)
XtraBackup
XtraBackup是一款基于InnoDB的在線熱備工具,具有開源免費(fèi),支持在線熱備,占用磁盤空間小,能夠非常快速地備份與恢復(fù)mysql數(shù)據(jù)庫(kù)
- 備份過(guò)程中不鎖表，快速可靠
- 備份過(guò)程中不會(huì)打斷正在執(zhí)行地事務(wù)
- 備份數(shù)據(jù)經(jīng)過(guò)壓縮，占用磁盤空間小
全量備份和增量備份
- 全量備份：備份全部數(shù)據(jù)。備份過(guò)程時(shí)間長(zhǎng)，占用空間大。第一次備份要使用全量備份
- 增量備份： 只備份變化的那部分?jǐn)?shù)據(jù)。備份的時(shí)間短，占用空間小。第二次以后使用增量備份
PXC全量備份
備份要在某個(gè)PXC節(jié)點(diǎn)的容器內(nèi)進(jìn)行，但應(yīng)該把備份數(shù)據(jù)保存到宿主機(jī)內(nèi)。所以采用目錄映射技術(shù)。先新建Docker卷：
docker volume create backup
挑選一個(gè)PXC節(jié)點(diǎn)node1，將其容器停止并刪除，然后重新創(chuàng)建一個(gè)增加了backup目錄映射的node1容器
docker stop node1 docker rm node1 # 數(shù)據(jù)庫(kù)數(shù)據(jù)保存在Docker卷v1中，不會(huì)丟失 # 參數(shù)改變： # 1. -e CLUSTER_JOIN=node2;原來(lái)其他節(jié)點(diǎn)是通過(guò)node1加入集群的，現(xiàn)在node1重新創(chuàng)建，需要選擇一個(gè)其他節(jié)點(diǎn)加入集群 # 2. -v backup:/data;將Docker卷backup映射到容器的/data目錄 docker run -d -u root -p 3306:3306 -e MYSQL_ROOT_PASSWORD=abc123456 -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=abc123456 -e CLUSTER_JOIN=node2 -v v1:/var/lib/mysql -v backup:/data --network=net1 --ip 172.18.0.2 --name=node1 pxc
在node1容器中安裝percona-xtrabackup-24
docker exec -it node1 bash apt-get update apt-get install percona-xtrabackup-24
之后便可以執(zhí)行如下命令進(jìn)行全量備份，備份后的數(shù)據(jù)會(huì)保存在/data/backup/full目錄下：
mkdir /data/backup mkdir /data/backup/full #不建議，已過(guò)時(shí) innobackupex --backup -u root -p abc123456 --target-dir=/data/backup/full xtrabackup --backup -uroot -pabc123456 --target-dir=/data/backup/full
官方文檔已經(jīng)不推薦使用innobackupex，而推薦使用xtrabackup命令
PXC全量還原
數(shù)據(jù)庫(kù)可以熱備份，但是不能熱還原，否則會(huì)造成業(yè)務(wù)數(shù)據(jù)和還原數(shù)據(jù)的沖突。
對(duì)于PXC集群為了避免還原過(guò)程中各節(jié)點(diǎn)數(shù)據(jù)同步?jīng)_突的問(wèn)題，我們要先解散原來(lái)的集群，刪除節(jié)點(diǎn)。然后新建節(jié)點(diǎn)空白數(shù)據(jù)庫(kù)，執(zhí)行還原，最后再建立起其他集群節(jié)點(diǎn)。
還原前還要將熱備份保存的未提交的事務(wù)回滾，還原之后重啟MySQL
停止并刪除PXC集群所有節(jié)點(diǎn)
docker stop node1 node2 node3 node4 node5 docker rm node1 node2 node3 node4 node5 docker volume rm v1 v2 v3 v4 v5
按照之前的步驟重新創(chuàng)建node1容器，并進(jìn)入容器，執(zhí)行冷還原
# 創(chuàng)建卷 docker volume create v1 # 創(chuàng)建容器 docker run -d -p 3306:3306 -e MYSQL_ROOT_PASSWORD=abc123456 -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=abc123456 -v v1:/var/lib/mysql -v backup:/data --name=node1 --network=net1 --ip 172.18.0.2 pxc # 以root身份進(jìn)入容器 docker exec -it -uroot node1 bash # 刪除數(shù)據(jù) rm -rf /var/lib/mysql/* # 準(zhǔn)備階段 xtrabackup --prepare --target-dir=/data/backup/full/ # 執(zhí)行冷還原 xtrabackup --copy-back --target-dir=/data/backup/full/ # 更改還原后的數(shù)據(jù)庫(kù)文件屬主 chown -R mysql:mysql /var/lib/mysql # 退出容器后，重啟容器 docker stop node1 docker start node1
到此這篇關(guān)于Docker部署Mysql集群的實(shí)現(xiàn)的文章就介紹到這了,更多相關(guān)Docker部署Mysql集群內(nèi)容請(qǐng)搜索本站以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持本站！
版權(quán)聲明：本站文章來(lái)源標(biāo)注為YINGSOO的內(nèi)容版權(quán)均為本站所有，歡迎引用、轉(zhuǎn)載，請(qǐng)保持原文完整并注明來(lái)源及原文鏈接。禁止復(fù)制或仿造本網(wǎng)站，禁止在非www.sddonglingsh.com所屬的服務(wù)器上建立鏡像，否則將依法追究法律責(zé)任。本站部分內(nèi)容來(lái)源于網(wǎng)友推薦、互聯(lián)網(wǎng)收集整理而來(lái)，僅供學(xué)習(xí)參考，不代表本站立場(chǎng)，如有內(nèi)容涉嫌侵權(quán)，請(qǐng)聯(lián)系alex-e#qq.com處理。
關(guān)注官方微信