文章目錄
- 什么是 MHA
- MHA 的組成
- MHA 的特點
- 搭建 MySQL MHA
- 準備
- 1.Master、Slave1、Slave2 節點上安裝 mysql5.7
- 2.修改 Master、Slave1、Slave2 節點的主機名
- 3.修改 Master、Slave1、Slave2 節點的 Mysql主組態檔`/etc/my.cnf`并創建軟連接
- 4.配置 mysql 一主兩從
- (1)所有資料庫節點進行MySQL授權
- (2)在 Master 節點查看二進制檔案和同步點
- (3)在 Slave1、Slave2 節點執行同步操作
- (4)開啟只讀模式
- (5)插入資料測驗資料庫同步
- 5.安裝 MHA 軟體
- (1)所有服務器上都安裝 MHA 依賴的環境,首先安裝 epel 源
- (2)安裝 MHA 軟體包,先在所有服務器上必須先安裝 node 組件
- (3)在 MHA manager 節點上安裝 manager 組件
- 小知識
- manager 組件安裝后在`/usr/local/bin` 下面會生成幾個工具,
- node 組件安裝后也會在`/usr/local/bin` 下面會生成幾個腳本(這些工具通常由 MHAManager 的腳本觸發,無需人為操作)
- 6.在所有服務器上配置無密碼認證
- (1)在 `manager` 節點上配置到所有資料庫節點的無密碼認證
- (2)在 `mysql1` 上配置到所有資料庫節點的無密碼認證
- (3)在 `mysql2` 上配置到資料庫節點 `mysql1` 和 `mysql3` 的無密碼認證
- (4)在 `mysql3` 上配置到資料庫節點 `mysql1` 和 `mysql2` 的無密碼認證
- 7. manager 節點上配置 MHA
- (1)在 manager 節點上復制相關腳本到`/usr/local/bin` 目錄
- 拷貝后會有四個執行檔案
- (2)復制上述的自動切換時 VIP 管理的腳本到 `/usr/local/bin` 目錄,這里使用`master_ip_failover`腳本來管理 VIP 和故障切換
- (3)修改內容如下:
- (4)創建 MHA 軟體目錄并拷貝組態檔,這里使用`app1.cnf`組態檔來管理 mysql 節點服務器
- 小知識:
- 8.第一次配置需要在 Master 節點上手動開啟虛擬IP
- 9.在 manager 節點上測驗 ssh 無密碼認證,如果正常最后會輸出 successfully,
- 10.在 manager 節點上測驗 mysql 主從連接情況,最后出現 MySQL Replication Health is OK 字樣說明正常,
- 11.在 manager 節點上啟動 MHA
- 12.查看 MHA 狀態,可以看到當前的 master 是 Mysql1 節點
- 13.查看 MHA 日志,也以看到當前的 master 是 192.168.179.50
- 14.查看 Mysql1 的 VIP 地址 192.168.80.200 是否存在,這個 VIP 地址不會因為 manager 節點停止 MHA 服務而消失,
- 關閉 manager 服務,
- 故障模擬
- 在 manager 節點上監控觀察日志記錄
- 在 Master 節點 Mysql1 上停止mysql服務
- 故障切換備選主庫的演算法:
- 故障模擬后manager節點服務器上能夠觀測到:
- 故障修復
- 1.修復mysql
- 2.修復主從
- 在現主庫服務器 Mysql2 查看二進制檔案和同步點
- 在原主庫服務器 mysql1 執行同步操作
- 3.在 manager 節點上修改組態檔app1.cnf(再把這個記錄添加進去,因為它檢測掉失效時候會自動消失)
- 4.再次測驗ssh和主從連接
- 5.啟動MHA服務
- 6.查看當前master資料庫
什么是 MHA
MHA(MasterHigh Availability)是一套優秀的MySQL高可用環境下故障切換和主從復制的軟體,
MHA 的出現就是解決MySQL 單點的問題,
MySQL故障切換程序中,MHA能做到0-30秒內自動完成故障切換操作,
MHA能在故障切換的程序中最大程度上保證資料的一致性,以達到真正意義上的高可用,
MHA 的組成
-
MHA Node(資料節點)
MHA Node 運行在每臺 MySQL 服務器上, -
MHA Manager(管理節點)
MHA Manager 可以單獨部署在一臺獨立的機器上,管理多個 master-slave 集群;也可以部署在一臺 slave 節點上,
MHA Manager 會定時探測集群中的 master 節點,當 master 出現故障時,它可以自動將最新資料的 slave 提升為新的 master, 然后將所有其他的 slave 重新指向新的 master,整個故障轉移程序對應用程式完全透明,
MHA 的特點
- 自動故障切換程序中,MHA試圖從宕機的主服務器上保存二進制日志,最大程度的保證資料不丟失
- 使用半同步復制,可以大大降低資料丟失的風險,如果只有一個slave已經收到了最新的二進制日志,MHA可以將最新的二進制日志應用于其他所有的slave服務器上,因此可以保證所有節點的資料一致性
- 目前MHA支持一主多從架構,最少三臺服務,即一主兩從
搭建 MySQL MHA
準備
MHA manager 節點服務器:CentOS7.4(64 位) manager/192.168.179.40 ,安裝MHA node 和 manager 組件
Master 節點服務器:CentOS7.4(64 位) mysql1/192.168.179.50 ,安裝mysql5.7、MHA node 組件
Slave1 節點服務器:CentOS7.4(64 位) mysql2/192.168.179.60 ,安裝mysql5.7、MHA node 組件
Slave2 節點服務器:CentOS7.4(64 位) mysql3/192.168.179.80 ,安裝mysql5.7、MHA node 組件
1.Master、Slave1、Slave2 節點上安裝 mysql5.7
我的機子是已經裝好MySQL的狀態,就不做演示了,如果有不了解怎么裝MySQL的兄弟可以看下博主之前的博客有詳細的解說
2.修改 Master、Slave1、Slave2 節點的主機名
Master 節點服務器:CentOS7.4(64 位) 192.168.179.50
關閉防火墻及內核防護
[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# systemctl disable firewalld
[root@localhost ~]# setenforce 0
查看MySQL狀態
[root@localhost ~]# systemctl status mysqld.service
修改主機名
[root@localhost ~]# hostnamectl set-hostname mysql1
[root@localhost ~]# su
Slave1 節點服務器:CentOS7.4(64 位) 192.168.179.60
關閉防火墻及內核防護
[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# systemctl disable firewalld
[root@localhost ~]# setenforce 0
查看MySQL狀態
[root@localhost ~]# systemctl status mysqld.service
修改主機名
[root@localhost ~]# hostnamectl set-hostname mysql2
[root@localhost ~]# su
Slave2 節點服務器:CentOS7.4(64 位) 192.168.179.80
關閉防火墻及內核防護
[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# systemctl disable firewalld
[root@localhost ~]# setenforce 0
查看MySQL狀態
[root@localhost ~]# systemctl status mysqld.service
修改主機名
[root@localhost ~]# hostnamectl set-hostname mysql3
[root@localhost ~]# su
圖例:

3.修改 Master、Slave1、Slave2 節點的 Mysql主組態檔/etc/my.cnf并創建軟連接
[root@mysql1 ~]# vim /etc/my.cnf
...
server-id = 11
log_bin = master-bin
log-slave-updates = true
...
[root@mysql1 ~]# systemctl restart mysqld.service
創建軟連接
[root@mysql1 ~]# ln -s /usr/local/mysql/bin/mysql /usr/sbin/
[root@mysql1 ~]# ln -s /usr/local/mysql/bin/mysqlbinlog /usr/sbin/
[root@mysql2 ~]# vim /etc/my.cnf
...
server-id = 22
log_bin = master-bin
relay-log = relay-log-bin
relay-log-index = slave-relay-bin.index
...
[root@mysql2 ~]# systemctl restart mysqld.service
創建軟連接
[root@mysql2 ~]# ln -s /usr/local/mysql/bin/mysql /usr/sbin/
[root@mysql2 ~]# ln -s /usr/local/mysql/bin/mysqlbinlog /usr/sbin/
[root@mysql3 ~]# vim /etc/my.cnf
...
server-id = 33
log_bin = master-bin
relay-log = relay-log-bin
relay-log-index = slave-relay-bin.index
...
[root@mysql3 ~]# systemctl restart mysqld.service
創建軟連接
[root@mysql3 ~]# ln -s /usr/local/mysql/bin/mysql /usr/sbin/
[root@mysql3 ~]# ln -s /usr/local/mysql/bin/mysqlbinlog /usr/sbin/
圖示:
主資料庫

從資料庫

4.配置 mysql 一主兩從
(1)所有資料庫節點進行MySQL授權
[root@mysql1 ~]# mysql -uroot -p123456
mysql> grant replication slave on *.* to 'myslave'@'192.168.179.%' identified by '123';
mysql> grant all on *.* to 'mha'@'192.168.179.%' identified by 'wolf';
mysql> grant all on *.* to 'mha'@'mysql1' identified by 'wolf';
mysql> grant all on *.* to 'mha'@'mysql2' identified by 'wolf';
mysql> grant all on *.* to 'mha'@'mysql3' identified by 'wolf';
mysql> flush privileges;
圖示:

從資料庫

(2)在 Master 節點查看二進制檔案和同步點
mysql> show master status;
+-------------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+-------------------+----------+--------------+------------------+-------------------+
| master-bin.000001 | 2045 | | | |
+-------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

(3)在 Slave1、Slave2 節點執行同步操作
mysql> change master to master_host='192.168.179.50',master_user='myslave',master_password='123',master_log_file='master-bin.000001',master_log_pos=2045;
mysql> start slave;
mysql> show slave status\G; #查看資料同步結果
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
圖示:

(4)開啟只讀模式
mysql> set global read_only=1;

(5)插入資料測驗資料庫同步
在 Master 主庫插入條資料,測驗是否同步
create database test_db;
use test_db;
create table test(id int);
insert into test(id) values (1);
圖示:
主資料庫服務器:

從資料庫服務器:

5.安裝 MHA 軟體
(1)所有服務器上都安裝 MHA 依賴的環境,首先安裝 epel 源
MHA manager 節點服務器
[root@localhost yum.repos.d]# yum install epel-release --nogpgcheck -y
[root@localhost yum.repos.d]# yum install -y perl-DBD-MySQL \
perl-Config-Tiny \
perl-Log-Dispatch \
perl-Parallel-ForkManager \
perl-ExtUtils-CBuilder \
perl-ExtUtils-MakeMaker \
perl-CPAN
主資料庫服務器
[root@mysql1 backup]# yum install epel-release --nogpgcheck -y
[root@mysql1 backup]# yum install -y perl-DBD-MySQL \
perl-Config-Tiny \
perl-Log-Dispatch \
perl-Parallel-ForkManager \
perl-ExtUtils-CBuilder \
perl-ExtUtils-MakeMaker \
perl-CPAN
從資料庫服務器
[root@mysql2 backup]# yum install epel-release --nogpgcheck -y
[root@mysql2 backup]# yum install -y perl-DBD-MySQL \
perl-Config-Tiny \
perl-Log-Dispatch \
perl-Parallel-ForkManager \
perl-ExtUtils-CBuilder \
perl-ExtUtils-MakeMaker \
perl-CPAN
[root@mysql3 backup]# yum install epel-release --nogpgcheck -y
[root@mysql3 backup]# yum install -y perl-DBD-MySQL \
perl-Config-Tiny \
perl-Log-Dispatch \
perl-Parallel-ForkManager \
perl-ExtUtils-CBuilder \
perl-ExtUtils-MakeMaker \
perl-CPAN
圖示:


(2)安裝 MHA 軟體包,先在所有服務器上必須先安裝 node 組件
對于每個作業系統版本不一樣,這里 CentOS7.4 必須選擇 0.57 版本,
在所有服務器上必須先安裝 node 組件,最后在 MHA-manager 節點上安裝 manager 組件,因為 manager 依賴 node 組件,
MHA manager 節點服務器
[root@localhost yum.repos.d]# cd /opt/
[root@localhost opt]# rz -E
rz waiting to receive.
[root@localhost opt]# tar zxvf mha4mysql-node-0.57.tar.gz
[root@localhost opt]# cd mha4mysql-node-0.57/
[root@localhost mha4mysql-node-0.57]# perl Makefile.PL
[root@localhost mha4mysql-node-0.57]# make && make instal
主資料庫服務器
[root@mysql1 backup]# cd /opt/
[root@mysql1 opt]# rz -E
rz waiting to receive.
[root@mysql1 opt]# tar zxvf mha4mysql-node-0.57.tar.gz
[root@mysql1 opt]# cd mha4mysql-node-0.57/
[root@mysql1 mha4mysql-node-0.57]# perl Makefile.PL
[root@mysql1 mha4mysql-node-0.57]# make && make install
從資料庫服務器
[root@mysql2 backup]# cd /opt/
[root@mysql2 opt]# rz -E
rz waiting to receive.
[root@mysql2 opt]# tar zxvf mha4mysql-node-0.57.tar.gz
[root@mysql2 opt]# cd mha4mysql-node-0.57/
[root@mysql2 mha4mysql-node-0.57]# perl Makefile.PL
[root@mysql2 mha4mysql-node-0.57]# make && make install
[root@mysql3 backup]# cd /opt/
[root@mysql3 opt]# rz -E
rz waiting to receive.
[root@mysql3 opt]# tar zxvf mha4mysql-node-0.57.tar.gz
[root@mysql3 opt]# cd mha4mysql-node-0.57/
[root@mysql3 mha4mysql-node-0.57]# perl Makefile.PL
[root@mysql3 mha4mysql-node-0.57]# make && make install


(3)在 MHA manager 節點上安裝 manager 組件
[root@localhost mha4mysql-node-0.57]# cd /opt/
[root@localhost opt]# tar zxvf mha4mysql-manager-0.57.tar.gz
[root@localhost opt]# cd mha4mysql-manager-0.57/
[root@localhost mha4mysql-manager-0.57]# perl Makefile.PL
[root@localhost mha4mysql-manager-0.57]# make && make install


小知識
manager 組件安裝后在/usr/local/bin 下面會生成幾個工具,
主要包括以下幾個:
masterha_check_ssh 檢查 MHA 的 SSH 配置狀況
masterha_check_repl 檢查 MySQL 復制狀況
masterha_manger 啟動 manager的腳本
masterha_check_status 檢測當前 MHA 運行狀態
masterha_master_monitor 檢測 master 是否宕機
masterha_master_switch 控制故障轉移(自動或者手動)
masterha_conf_host 添加或洗掉配置的 server 資訊
masterha_stop 關閉manager
node 組件安裝后也會在/usr/local/bin 下面會生成幾個腳本(這些工具通常由 MHAManager 的腳本觸發,無需人為操作)
主要如下:
save_binary_logs 保存和復制 master 的二進制日志
apply_diff_relay_logs 識別差異的中繼日志事件并將其差異的事件應用于其他的 slave
filter_mysqlbinlog 去除不必要的 ROLLBACK 事件(MHA 已不再使用這個工具)
purge_relay_logs 清除中繼日志(不會阻塞 SQL 執行緒)


6.在所有服務器上配置無密碼認證
(1)在 manager 節點上配置到所有資料庫節點的無密碼認證
[root@localhost bin]# ssh-keygen -t rsa #一路按回車
[root@localhost bin]# ssh-copy-id 192.168.179.50
[root@localhost bin]# ssh-copy-id 192.168.179.60
[root@localhost bin]# ssh-copy-id 192.168.179.80
圖示:


(2)在 mysql1 上配置到所有資料庫節點的無密碼認證
[root@mysql1 bin]# ssh-keygen -t rsa
[root@mysql1 bin]# ssh-copy-id 192.168.179.60
[root@mysql1 bin]# ssh-copy-id 192.168.179.80
重啟服務
[root@mysql1 data]# mysql -uroot -p123456

(3)在 mysql2 上配置到資料庫節點 mysql1 和 mysql3 的無密碼認證
[root@mysql2 bin]# ssh-keygen -t rsa
[root@mysql2 bin]# ssh-copy-id 192.168.179.50
[root@mysql2 bin]# ssh-copy-id 192.168.179.80
(4)在 mysql3 上配置到資料庫節點 mysql1 和 mysql2 的無密碼認證
[root@mysql3 bin]# ssh-keygen -t rsa
[root@mysql3 bin]# ssh-copy-id 192.168.179.50
[root@mysql3 bin]# ssh-copy-id 192.168.179.60
7. manager 節點上配置 MHA
(1)在 manager 節點上復制相關腳本到/usr/local/bin 目錄
[root@localhost bin]# cd /opt/mha4mysql-manager-0.57/samples/
[root@localhost samples]# cp -rp scripts/ /usr/local/bin/
拷貝后會有四個執行檔案
master_ip_failover #自動切換時 VIP 管理的腳本
master_ip_online_change #在線切換時 vip 的管理
power_manager #故障發生后關閉主機的腳本
send_report #因故障切換后發送報警的腳本
(2)復制上述的自動切換時 VIP 管理的腳本到 /usr/local/bin 目錄,這里使用master_ip_failover腳本來管理 VIP 和故障切換
[root@localhost samples]# cd /usr/local/bin/scripts/
[root@localhost scripts]# cp master_ip_failover /usr/local/bin/
[root@localhost scripts]# cd ..
[root@localhost bin]# ll master_ip_failover
-rwxr-xr-x 1 root root 3648 2月 19 18:58 master_ip_failover
(3)修改內容如下:
[root@localhost bin]# vim master_ip_failover
#!/usr/bin/env perl
use strict;
use warnings FATAL => 'all';
use Getopt::Long;
my (
$command, $ssh_user, $orig_master_host, $orig_master_ip,
$orig_master_port, $new_master_host, $new_master_ip, $new_master_port
);
my $vip = '192.168.179.200'; #指定vip的地址
my $brdc = '192.168.179.255'; #指定vip的廣播地址
my $ifdev = 'ens33'; #指定vip系結的網卡
my $key = '1';
my $ssh_start_vip = "/sbin/ifconfig ens33:$key $vip";
my $ssh_stop_vip = "/sbin/ifconfig ens33:$key down";
my $exit_code = 0; #指定退出狀態碼為0
#my $ssh_start_vip = "/usr/sbin/ip addr add $vip/24 brd $brdc dev $ifdev label $ifdev:$key;/usr/sbin/arping -q -A -c 1 -I $ifdev $vip;iptables -F;";
#my $ssh_stop_vip = "/usr/sbin/ip addr del $vip/24 dev $ifdev label $ifdev:$key";
GetOptions(
'command=s' => \$command,
'ssh_user=s' => \$ssh_user,
'orig_master_host=s' => \$orig_master_host,
'orig_master_ip=s' => \$orig_master_ip,
'orig_master_port=i' => \$orig_master_port,
'new_master_host=s' => \$new_master_host,
'new_master_ip=s' => \$new_master_ip,
'new_master_port=i' => \$new_master_port,
);
exit &main();
sub main {
print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";
if ( $command eq "stop" || $command eq "stopssh" ) {
my $exit_code = 1;
eval {
print "Disabling the VIP on old master: $orig_master_host \n";
&stop_vip();
$exit_code = 0;
};
if ($@) {
warn "Got Error: $@\n";
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "start" ) {
my $exit_code = 10;
eval {
print "Enabling the VIP - $vip on the new master - $new_master_host \n";
&start_vip();
$exit_code = 0;
}
if ($@) {
warn $@;
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "status" ) {
print "Checking the Status of the script.. OK \n";
exit 0;
}
else {
&usage();
exit 1;
}
}
sub start_vip() {
`ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
}
## A simple system call that disable the VIP on the old_master
sub stop_vip() {
`ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
}
sub usage {
print
"Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
}

(4)創建 MHA 軟體目錄并拷貝組態檔,這里使用app1.cnf組態檔來管理 mysql 節點服務器
[root@localhost bin]# mkdir /etc/masterha
[root@localhost bin]# cp /opt/mha4mysql-manager-0.57/samples/conf/app1.cnf /etc/masterha
[root@localhost bin]# cd /etc/masterha
[root@localhost masterha]# vim app1.cnf #洗掉原有內容,直接復制并修改節點服務器的IP地址
[server default]
manager_log=/var/log/masterha/app1/manager.log #manager日志
manager_workdir=/var/log/masterha/app1.log #manager作業目錄
master_binlog_dir=/usr/local/mysql/data/ #master保存binlog的位置,這里的路徑要與master里配置的binlog的路徑一致,以便MHA能找到
master_ip_failover_script=/usr/local/bin/master_ip_failover #設定自動failover時候的切換腳本,也就是上面的那個腳本
master_ip_online_change_script=/usr/local/bin/master_ip_online_change #設定手動切換時候的切換腳本
password=manager #設定mysql中root用戶的密碼,這個密碼是前文中創建監控用戶的那個密碼
ping_interval=1 #設定監控主庫,發送ping包的時間間隔,默認是3秒,嘗試三次沒有回應的時候自動進行failover
remote_workdir=/tmp #設定遠端mysql在發生切換時binlog的保存位置
repl_password=123 #設定復制用戶的密碼
repl_user=myslave #設定復制用戶的用戶
#report_script=/usr/local/send_report #設定發生切換后發送的報警的腳本(這里因為沒有寫這個腳本所有將其注釋掉)
secondary_check_script=/usr/local/bin/masterha_secondary_check -s 192.168.80.11 -s 192.168.80.12 #指定檢查的從服務器IP地址
shutdown_script="" #設定故障發生后關閉故障主機腳本(該腳本的主要作用是關閉主機防止發生腦裂,這里沒有使用)
ssh_user=root #設定ssh的登錄用戶名
user=mha #設定監控用戶root
[server1]
hostname=192.168.80.10
port=3306
[server2]
candidate_master=1
check_repl_delay=0
hostname=192.168.80.11
port=3306
#設定為候選master,設定該引數以后,發生主從切換以后將會將此從庫提升為主庫,即使這個主庫不是集群中最新的slave
[server3]
hostname=192.168.80.12
port=3306

小知識:
默認情況下如果一個slave落后master 超過100M的relay logs的話,MHA將不會選擇該slave作為一個新的master, 因為對于這個slave的恢復需要花費很長時間;通過設定check_repl_delay=0,MHA觸發切換在選擇一個新的master的時候將會忽略復制延時,這個引數對于設定了candidate_master=1的主機非常有用,因為這個候選主在切換的程序中一定是新的master
8.第一次配置需要在 Master 節點上手動開啟虛擬IP
[root@mysql1 ~]# ifconfig ens33:1 192.168.80.200/24

9.在 manager 節點上測驗 ssh 無密碼認證,如果正常最后會輸出 successfully,
masterha_check_ssh -conf=/etc/masterha/app1.cnf
Tue Nov 26 23:09:45 2020 - [warning] Global configuration file /etc/masterha_default.cnf not found. Skipping.
Tue Nov 26 23:09:45 2020 - [info] Reading application default configuration from /etc/masterha/app1.cnf..
Tue Nov 26 23:09:45 2020 - [info] Reading server configuration from /etc/masterha/app1.cnf..
Tue Nov 26 23:09:45 2020 - [info] Starting SSH connection tests..
Tue Nov 26 23:09:46 2020 - [debug]
Tue Nov 26 23:09:45 2020 - [debug] Connecting via SSH from root@192.168.80.11(192.168.80.11:22) to root@192.168.80.12(192.168.80.12:22)..
Tue Nov 26 23:09:46 2020 - [debug] ok.
Tue Nov 26 23:09:47 2020 - [debug]
Tue Nov 26 23:09:46 2020 - [debug] Connecting via SSH from root@192.168.80.12(192.168.80.12:22) to root@192.168.80.11(192.168.80.11:22)..
Tue Nov 26 23:09:47 2020 - [debug] ok.
Tue Nov 26 23:09:47 2020 - [info] All SSH connection tests passed successfully.
10.在 manager 節點上測驗 mysql 主從連接情況,最后出現 MySQL Replication Health is OK 字樣說明正常,
masterha_check_repl -conf=/etc/masterha/app1.cnf
Tue Nov 26 23:10:29 2020 - [info] Slaves settings check done.
Tue Nov 26 23:10:29 2020 - [info]
192.168.80.11(192.168.80.11:3306) (current master)
+--192.168.80.12(192.168.80.12:3306)
Tue Nov 26 23:10:29 2020 - [info] Checking replication health on 192.168.80.12..
Tue Nov 26 23:10:29 2020 - [info] ok.
Tue Nov 26 23:10:29 2020 - [info] Checking master_ip_failover_script status:
Tue Nov 26 23:10:29 2020 - [info] /usr/local/bin/master_ip_failover --command=status --ssh_user=root --orig_master_host=192.168.80.11 --orig_master_ip=192.168.80.11 --orig_master_port=3306
IN SCRIPT TEST====/sbin/ifconfig ens33:1 down==/sbin/ifconfig ens33:1 192.168.80.200===
Checking the Status of the script.. OK
Tue Nov 26 23:10:29 2020 - [info] OK.
Tue Nov 26 23:10:29 2020 - [warning] shutdown_script is not defined.
Tue Nov 26 23:10:29 2020 - [info] Got exit code 0 (Not master dead).
MySQL Replication Health is OK.
11.在 manager 節點上啟動 MHA
[root@localhost masterha]# nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &
詳解:
--remove_dead_master_conf:該引數代表當發生主從切換后,老的主庫的 ip 將會從組態檔中移除,
--manger_log:日志存放位置,
--ignore_last_failover:在預設情況下,如果 MHA 檢測到連續發生宕機,且兩次宕機間隔不足 8 小時的話,則不會進行 Failover, 之所以這樣限制是為了避免 ping-pong 效應,該引數代表忽略上次 MHA 觸發切換產生的檔案,默認情況下,MHA 發生切換后會在日志記目錄,也就是上面設定的日志app1.failover.complete檔案,下次再次切換的時候如果發現該目錄下存在該檔案將不允許觸發切換,除非在第一次切換后收到洗掉該檔案,為了方便,這里設定為--ignore_last_failover,
12.查看 MHA 狀態,可以看到當前的 master 是 Mysql1 節點
[root@localhost masterha]# masterha_check_status --conf=/etc/masterha/app1.cnf
app1 (pid:10078) is running(0:PING_OK), master:192.168.179.50
13.查看 MHA 日志,也以看到當前的 master 是 192.168.179.50
[root@localhost masterha]# cat /var/log/masterha/app1/manager.log | grep "current master"
Fri Feb 19 21:00:51 2021 - [info] Checking SSH publickey authentication settings on the current master..
192.168.179.50(192.168.179.50:3306) (current master)
圖示:

14.查看 Mysql1 的 VIP 地址 192.168.80.200 是否存在,這個 VIP 地址不會因為 manager 節點停止 MHA 服務而消失,
[root@mysql1 ~]# ifconfig

關閉 manager 服務,
可以使用這個命令:
masterha_stop --conf=/etc/masterha/app1.cnf
或者可以直接采用 kill 行程 ID 的方式關閉,
故障模擬
在 manager 節點上監控觀察日志記錄
[root@localhost bin]# tail -f /var/log/masterha/app1/manager.log

在 Master 節點 Mysql1 上停止mysql服務
systemctl stop mysqld
或
pkill -9 mysql

正常自動切換一次后,MHA 行程會退出,HMA 會自動修改 app1.cnf 檔案內容,將宕機的 mysql1 節點洗掉,

故障切換備選主庫的演算法:
- 一般判斷從庫的是從(position/GTID)判斷優劣,資料有差異,最接近于master的slave,成為備選主,
- 資料一致的情況下,按照組態檔順序,選擇備選主庫,
- 設定有權重(candidate_master=1),按照權重強制指定備選主,
(1)默認情況下如果一個slave落后master 100M的relay logs的話,即使有權重,也會失效,
(2)如果check_repl_delay=0的話,即使落后很多日志,也強制選擇其為備選主,
故障模擬后manager節點服務器上能夠觀測到:




故障修復
1.修復mysql
[root@mysql1 data]# systemctl restart mysqld

2.修復主從
在現主庫服務器 Mysql2 查看二進制檔案和同步點
mysql> show master status;

在原主庫服務器 mysql1 執行同步操作
mysql> change master to master_host='192.168.179.60',master_user='myslave',master_password='123',master_log_file='master-bin.000001',master_log_pos=154;
Query OK, 0 rows affected, 2 warnings (0.01 sec)
mysql> start slave;
Query OK, 0 rows affected (0.00 sec)
mysql> show slave status\G
*************************** 1. row ***************************
Slave_IO_State: Waiting for master to send event
Master_Host: 192.168.179.60
Master_User: myslave
Master_Port: 3306
Connect_Retry: 60
Master_Log_File: master-bin.000001
Read_Master_Log_Pos: 154
Relay_Log_File: mysql1-relay-bin.000002
Relay_Log_Pos: 321
Relay_Master_Log_File: master-bin.000001
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

3.在 manager 節點上修改組態檔app1.cnf(再把這個記錄添加進去,因為它檢測掉失效時候會自動消失)
[root@localhost bin]# vim /etc/masterha/app1.cnf
...
secondary_check_script=/usr/local/bin/masterha_secondary_check -s 192.168.179.50 -s 192.168.179.80
...
[server1]
hostname=192.168.179.60
port=3306

4.再次測驗ssh和主從連接
[root@localhost bin]# masterha_check_ssh -conf=/etc/masterha/app1.cnf
[root@localhost bin]# masterha_check_repl -conf=/etc/masterha/app1.cnf
5.啟動MHA服務
[root@localhost bin]# nohup masterha_manager --conf=/etc/masterha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/masterha/app1/manager.log 2>&1 &
[1] 85261

6.查看當前master資料庫
[root@localhost bin]# masterha_check_status --conf=/etc/masterha/app1.cnf
app1 (pid:85261) is running(0:PING_OK), master:192.168.179.60

轉載請註明出處,本文鏈接:https://www.uj5u.com/ruanti/266355.html
標籤:其他
上一篇:NoSQL之Redis配置與優化
