新聞中心
MHA(Master HA)是一款開源的 MySQL 的高可用程序,它為 MySQL 主從復制架構(gòu)提供了 automating master failover 功能。MHA 在監(jiān)控到 master 節(jié)點故障時,會提升其中擁有最新數(shù)據(jù)的 slave 節(jié)點成為新的master 節(jié)點,在此期間,MHA 會通過于其它從節(jié)點獲取額外信息來避免一致性方面的問題。MHA 還提供了 master 節(jié)點的在線切換功能,即按需切換 master/slave 節(jié)點。

成都創(chuàng)新互聯(lián)是專業(yè)的鞍山網(wǎng)站建設公司,鞍山接單;提供網(wǎng)站制作、網(wǎng)站設計,網(wǎng)頁設計,網(wǎng)站設計,建網(wǎng)站,PHP網(wǎng)站建設等專業(yè)做網(wǎng)站服務;采用PHP框架,可快速的進行鞍山網(wǎng)站開發(fā)網(wǎng)頁制作和功能擴展;專業(yè)做搜索引擎喜愛的網(wǎng)站,專業(yè)的做網(wǎng)站團隊,希望更多企業(yè)前來合作!
安裝mysql5.7,并配置好主從復制
第一:安裝mysql57,并關(guān)閉防火墻
yum install epel* -y && yum clean all && yum makecache
rpm -Uvh http://repo.mysql.com/mysql57-community-release-el7.rpm
yum clean all && yum makecache
yum install gcc gcc-c++ openssl-devel mysql mysql-server mysql-devel -y
systemctl disable firewalld
systemctl stop firewalld
systemctl start mysqld
cat /var/log/mysqld.log | grep 'password is generated' #找到mysql初始密碼
mysql_secure_installation #對mysql進行安全加固
第二:修改my.cnf(三臺都要,只有server-id修改為不一樣的就好啦)
vi /etc/my.cnf
[client]
user=root
password=123456
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
#每個server上不一致,見規(guī)劃
server-id = 1
#read-only=1 #不在配置文件中限定只讀,但是要記得在slave上限制只讀
#mysql5.6已上的特性,開啟gtid,必須主從全開
gtid_mode = on
enforce_gtid_consistency = 1
log_slave_updates = 1
#開啟半同步復制 否則自動切換主從的時候會報主鍵錯誤
plugin_load = "rpl_semi_sync_master=semisync_master.so;rpl_semi_sync_slave=semisync_slave.so"
loose_rpl_semi_sync_master_enabled = 1
loose_rpl_semi_sync_slave_enabled = 1
loose_rpl_semi_sync_master_timeout = 5000
log-bin=mysql-bin
relay-log = mysql-relay-bin
replicate-wild-ignore-table=mysql.%
replicate-wild-ignore-table=test.%
replicate-wild-ignore-table=information_schema.%
第三:在 3 個 mysql 節(jié)點做授權(quán)配置(主從復制授權(quán))
mysql> grant replication slave on *.* to 'repl_user'@'192.168.1.%' identified by '123456';
mysql> grant all on *.* to 'root'@'192.168.1.%' identified by '123456'; #很重要
第四:在兩個salve節(jié)點上執(zhí)行,只讀限制(防止意外被寫數(shù)據(jù),很重要)
mysql> set global read_only=1;
第五:在主master上查看狀態(tài)
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000002 | 1298 | | | |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)
第六:在兩個slave節(jié)點執(zhí)行下面的操作
mysql> change master to master_host='192.168.1.57',master_user='repl_user',master_password='123456',master_log_file='mysql-bin.000002',master_log_pos=1298;
mysql> start slave;
mysql> show slave status\G; #查看slave IO和slave sql是否都正常
MHA基本環(huán)境準備
第七:配置三臺機器的ssh互信(三臺都要操作)
ssh-keygen -t rsa
ssh-copy-id -i /root/.ssh/id_rsa.pub root@192.168.1.56
ssh-copy-id -i /root/.ssh/id_rsa.pub root@192.168.1.57
ssh-copy-id -i /root/.ssh/id_rsa.pub root@192.168.1.58
#測試是否成功
ssh 192.168.1.57 date
第八:安裝MHA軟件(在三個節(jié)點上都裝mha的node軟件)
#先安裝依賴
wget http://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm
rpm -ivh epel-release-latest-7.noarch.rpm
yum install perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager -y
下載軟件(方式任選其一)
wget https://qiniu.wsfnk.com/mha4mysql-node-0.58-0.el7.centos.noarch.rpm
#wget https://github.com/yoshinorim/mha4mysql-node/releases/download/v0.58/mha4mysql-node-0.58-0.el7.centos.noarch.rpm
rpm -ivh mha4mysql-node-0.58-0.el7.centos.noarch.rpm
第九:僅在manager節(jié)點上安裝mha管理軟件
wget https://qiniu.wsfnk.com/mha4mysql-manager-0.58-0.el7.centos.noarch.rpm
#wget https://github.com/yoshinorim/mha4mysql-manager/releases/download/v0.58/mha4mysql-manager-0.58-0.el7.centos.noarch.rpm
rpm -ivh mha4mysql-manager-0.58-0.el7.centos.noarch.rpm
yum install mailx -y #該軟件是用來發(fā)送郵件的
配置MHA(在manager節(jié)點上操作)
創(chuàng)建目錄
mkdir -p /etc/mha/scripts
第十:配置全局配置文件
vi /etc/masterha_default.cnf #一定要是這個路徑,不然后期masterha_check_ssh會提示未找到全局文件
[server default]
user=root
password=123456
ssh_user=root
repl_user=repl_user
repl_password=123456
ping_interval=1
#master_binlog_dir= /var/lib/mysql,/var/log/mysql
secondary_check_script=masterha_secondary_check -s 192.168.1.57 -s 192.168.1.58 -s 192.168.1.56
master_ip_failover_script="/etc/mha/scripts/master_ip_failover"
master_ip_online_change_script="/etc/mha/scripts/master_ip_online_change"
report_script="/etc/mha/scripts/send_report"
第十一:配置主配置文件
vi /etc/mha/app1.cnf
[server default]
manager_workdir=/var/log/mha/app1
manager_log=/var/log/mha/app1/manager.log
[server1]
hostname=192.168.1.57
candidate_master=1
master_binlog_dir="/var/lib/mysql"
#查看方式 find / -name mysql-bin*
[server2]
hostname=192.168.1.58
candidate_master=1
master_binlog_dir="/var/lib/mysql"
[server3]
hostname=192.168.1.56
master_binlog_dir="/var/lib/mysql"
#表示沒有機會成為master
no_master=1
第十二:配置VIP
#為了防止腦裂發(fā)生,推薦生產(chǎn)環(huán)境采用腳本的方式來管理虛擬 ip,而不是使用 keepalived來完成。
vi /etc/mha/scripts/master_ip_failover
#!/usr/bin/env perl
use strict;
use warnings FATAL => 'all';
use Getopt::Long;
my (
$command, $ssh_user, $orig_master_host,
$orig_master_ip,$orig_master_port, $new_master_host, $new_master_ip,$new_master_port
);
#定義VIP變量
my $vip = '192.168.1.59/24';
my $key = '1';
my $ssh_start_vip = "/sbin/ifconfig ens192:$key $vip";
my $ssh_stop_vip = "/sbin/ifconfig ens192:$key down";
GetOptions(
'command=s' => \$command,
'ssh_user=s' => \$ssh_user,
'orig_master_host=s' => \$orig_master_host,
'orig_master_ip=s' => \$orig_master_ip,
'orig_master_port=i' => \$orig_master_port,
'new_master_host=s' => \$new_master_host,
'new_master_ip=s' => \$new_master_ip,
'new_master_port=i' => \$new_master_port,
);
exit &main();
sub main {
print "\n\nIN SCRIPT TEST====$ssh_stop_vip==$ssh_start_vip===\n\n";
if ( $command eq "stop" || $command eq "stopssh" ) {
my $exit_code = 1;
eval {
print "Disabling the VIP on old master: $orig_master_host \n";
&stop_vip();
$exit_code = 0;
};
if ($@) {
warn "Got Error: $@\n";
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "start" ) {
my $exit_code = 10;
eval {
print "Enabling the VIP - $vip on the new master - $new_master_host \n";
&start_vip();
$exit_code = 0;
};
if ($@) {
warn $@;
exit $exit_code;
}
exit $exit_code;
}
elsif ( $command eq "status" ) {
print "Checking the Status of the script.. OK \n";
exit 0;
}
else {
&usage();
exit 1;
}
}
sub start_vip() {
`ssh $ssh_user\@$new_master_host \" $ssh_start_vip \"`;
}
sub stop_vip() {
return 0 unless ($ssh_user);
`ssh $ssh_user\@$orig_master_host \" $ssh_stop_vip \"`;
}
sub usage {
print
"Usage: master_ip_failover --command=start|stop|stopssh|status --orig_master_host=host --orig_master_ip=ip --orig_master_port=port --new_master_host=host --new_master_ip=ip --new_master_port=port\n";
}
第十三:配置報警郵件腳本
#mail郵件發(fā)送程序,需要先配置好發(fā)送這信息
vi /etc/mail.rc
set from=xingu@163.com
set smtp=smtp.163.com
set smtp-auth-user=xing
#拿163郵箱來說這個不是密碼,而是授權(quán)碼
set smtp-auth-password=wqwqwq123
set smtp-auth=login
#這是具體的郵件發(fā)送腳本
vi /etc/mha/scripts/send_report
#!/bin/bash
source /root/.bash_profile
# 解析變量
orig_master_host=`echo "$1" | awk -F = '{print $2}'`
new_master_host=`echo "$2" | awk -F = '{print $2}'`
new_slave_hosts=`echo "$3" | awk -F = '{print $2}'`
subject=`echo "$4" | awk -F = '{print $2}'`
body=`echo "$5" | awk -F = '{print $2}'`
#定義收件人地址
email="888118@wsfnk.com"
tac /var/log/mha/app1/manager.log | sed -n 2p | grep 'successfully' > /dev/null
if [ $? -eq 0 ]
then
messages=`echo -e "MHA $subject 主從切換成功\n master:$orig_master_host --> $new_master_host \n $body \n 當前從庫:$new_slave_hosts"`
echo "$messages" | mail -s "Mysql 實例宕掉,MHA $subject 切換成功" $email >>/tmp/mailx.log 2>&1
else
messages=`echo -e "MHA $subject 主從切換失敗\n master:$orig_master_host --> $new_master_host \n $body" `
echo "$messages" | mail -s ""Mysql 實例宕掉,MHA $subject 切換失敗"" $email >>/tmp/mailx.log 2>&1
fi
第十四:配置編寫VIP腳本
vi /etc/mha/scripts/master_ip_online_change
#!/bin/bash
source /root/.bash_profile
vip=`echo '192.168.1.59/24'` #設置VIP
key=`echo '1'`
command=`echo "$1" | awk -F = '{print $2}'`
orig_master_host=`echo "$2" | awk -F = '{print $2}'`
new_master_host=`echo "$7" | awk -F = '{print $2}'`
orig_master_ssh_user=`echo "${12}" | awk -F = '{print $2}'`
new_master_ssh_user=`echo "${13}" | awk -F = '{print $2}'`
#要求服務的網(wǎng)卡識別名一樣,都為ens192(這里是)
stop_vip=`echo "ssh root@$orig_master_host /usr/sbin/ifconfig ens192:$key down"`
start_vip=`echo "ssh root@$new_master_host /usr/sbin/ifconfig ens192:$key $vip"`
if [ $command = 'stop' ]
then
echo -e "\n\n\n****************************\n"
echo -e "Disabled thi VIP - $vip on old master: $orig_master_host \n"
$stop_vip
if [ $? -eq 0 ]
then
echo "Disabled the VIP successfully"
else
echo "Disabled the VIP failed"
fi
echo -e "***************************\n\n\n"
fi
if [ $command = 'start' -o $command = 'status' ]
then
echo -e "\n\n\n*************************\n"
echo -e "Enabling the VIP - $vip on new master: $new_master_host \n"
$start_vip
if [ $? -eq 0 ]
then
echo "Enabled the VIP successfully"
else
echo "Enabled the VIP failed"
fi
echo -e "***************************\n\n\n"
fi
第十五:將腳本賦予可執(zhí)行權(quán)限
chmod +x /etc/mha/scripts/master_ip_failover
chmod +x /etc/mha/scripts/master_ip_online_change
chmod +x /etc/mha/scripts/send_report
第十六:通過 masterha_check_ssh 驗證 ssh 信任登錄是否成功
masterha_check_ssh --conf=/etc/mha/app1.cnf
Wed May 16 23:17:58 2018 - All SSH connection tests passed successfully. #表示所有都成功
第十七:通過 masterha_check_repl 驗證 mysql 主從復制是否成功(下面輸出表示測試通過)
masterha_check_repl --conf=/etc/mha/app1.cnf
IN SCRIPT TEST====/sbin/ifconfig ens192:1 down==/sbin/ifconfig ens192:1 192.168.1.59/24===
Checking the Status of the script.. OK
Wed May 16 23:59:42 2018 - OK.
Wed May 16 23:59:42 2018 - shutdown_script is not defined.
Wed May 16 23:59:42 2018 - Got exit code 0 (Not master dead).
MySQL Replication Health is OK.
啟動MHA(注意:MHA監(jiān)控腳本切換一次就會退出,需要再次啟動)
第十八:先在master上綁定vip,(只需要在master綁定這一次,以后會自動切換)
/usr/sbin/ifconfig ens192:1 192.168.1.59/24
第十九:然后通過 masterha_manager 啟動 MHA 監(jiān)控(在manager角色上執(zhí)行)
mkdir /var/log/mha/app1 -p
touch /var/log/mha/app1/manager.log
#啟動mha監(jiān)控進程,下面是一條命令
nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover /var/log/mha/app1/manager.log 2>&1 &
#這樣 MHA 的日志保存在/var/log/masterha/app1/manager.log 下
檢查MHA的啟動狀態(tài)
tailf /var/log/masterha/app1/manager.log
#如果最后一行是如下,表明啟動成功
Ping(SELECT) succeeded, waiting until MySQL doesn’t respond..
第二十:檢查集群狀態(tài)
masterha_check_status --conf=/etc/mha/app1.cnf
切換測試之:自動切換(模擬master宕了)(實驗測試當物理故障時,沒有指定shutdown_script是沒用的,不切換)
第一:要實現(xiàn)自動 Failover,必須先啟動 MHA Manager,否則無法自動切換
A、殺掉主庫 mysql 進程,模擬主庫發(fā)生故障,進行自動 failover 操作。
B、看 MHA 切換日志,了解整個切換過程
第二:從上面的輸出可以看出整個 MHA 的切換過程,共包括以下的步驟:
1).配置文件檢查階段,這個階段會檢查整個集群配置文件配置;
2).宕機的 master 處理,這個階段包括虛擬 ip 摘除操作,主機關(guān)機操作(由于沒有定義power_manager腳本,不會關(guān)機);
3).復制 dead maste 和最新 slave 相差的 relay log,并保存到 MHA Manger 具體的目錄下;
4).識別含有最新更新的 slave;
5).應用從 master 保存的二進制日志事件(binlog events)(這點信息對于將故障master修復后加入集群很重要);
6).提升一個 slave 為新的 master 進行復制;
7).使其他的 slave 連接新的 master 進行復制。
第三:切換完成后,關(guān)注如下變化:
1、vip 自動從原來的 master 切換到新的 master,同時,manager 節(jié)點的監(jiān)控進程自動退出。
2、在日志目錄(/var/log/mha/app1)產(chǎn)生一個 app1.failover.complete 文件
3、/etc/mha/app1.cnf 配置文件中原來老的 master 配置被刪除。
切換測試之:在線切換(用于硬件升級)(很好使)
MHA 在線切換是 MHA 除了自動監(jiān)控切換換提供的另外一種方式,多用于諸如硬件升級,MySQL 數(shù)據(jù)庫遷移等等。該方式提供快速切換和優(yōu)雅的阻塞寫入,無關(guān)關(guān)閉原有服務器,整個切換過程在 0.5-2s 的時間左右,大大減少了停機時間
第一:注意點:前提,mha監(jiān)控沒有運行的情況下,才能進行
A、老master上的vip已經(jīng)正確生效了
B、各個salve節(jié)點數(shù)據(jù)庫的sql_IO和sql_sql進程都正常(即YES)
show slave status\G;
C、MHA腳本不能運行,若已處于監(jiān)控狀態(tài),需要停掉它
masterha_stop --conf=/etc/mha/app1.cnf
#若是mha監(jiān)控進程在運行,會報如下錯誤
Sat May 19 03:40:00 2018 - [error][/usr/share/perl5/vendor_perl/MHA/MasterRotate.pm, ln143] Getting advisory lock failed on the current master. MHA Monitor runs on the current master. Stop MHA Manager/Monitor and try again.
Sat May 19 03:40:00 2018 - [error][/usr/share/perl5/vendor_perl/MHA/ManagerUtil.pm, ln177] Got ERROR: at /usr/bin/masterha_master_switch line 53.
第二:執(zhí)行切換
#需要填寫新的master的IP
masterha_master_switch --conf=/etc/mha/app1.cnf --master_state=alive --new_master_host=192.168.1.57 --orig_master_is_new_slave --running_updates_limit=10000 --interactive=0
第三:MHA 在線切換基本步驟:
a、檢測 MHA 配置置及確認當前 master;
b、決定新的 master;
c、阻塞寫入到當前 master;
d、等待所有從服務器與現(xiàn)有 master 完成同步;
e、在新 master 授予寫權(quán)限,以及并行切換從庫;
f、重置原 master 為新 master 的 slave;
g、在線切換不會刪除/etc/mha/app1.cnf 配置文件中原來老的 master 配置;
如何將故障節(jié)點重新加入集群
通常情況下自動切換以后,原 master 可能已經(jīng)廢棄掉,待原 master 主機修復后,如果數(shù)據(jù)完整的情況下,可能想把原來 master 重新作為新主庫的 slave,這時我們可以借助當時自動切換時刻的 MHA 日志來完成對原 master 的修復。(若是下面第二步:出現(xiàn)的是第二種,可以不用借助日志,定位binlog日志點,可以自動定位)
(1)、修改 manager 配置文件(只針對自動切換的,在線切換不會刪除配置)
#將如下內(nèi)容添加到/etc/mha/app1.conf 中
[server1]
hostname=192.168.1.57
candidate_master=1
master_binlog_dir="/var/lib/mysql"
(2)、修復老的 master,然后設置為 slave
從自動切換時刻的 MHA 日志上可以發(fā)現(xiàn)類似如下信息:意思是說,如果 Master 主機修復好了,可以在修復好后的 Master 上執(zhí)行 CHANGE MASTER操作,作為新的 slave 庫。
cat /var/log/mha/app1/manager.log
Sat May 27 14:59:17 2017 - All other slaves should start replication from here. Statement
should be: CHANGE MASTER TO MASTER_HOST='172.16.213.232', MASTER_PORT=3306,
MASTER_LOG_FILE='mysql-bin.000009', MASTER_LOG_POS=120, MASTER_USER='repl_user',
MASTER_PASSWORD='xxx';
#或則
Sat May 19 05:00:48 2018 - All other slaves should start replication from here. Statement should be: CHANGE MASTER TO MASTER_HOST='192.168.1.58', MASTER_PORT=3306, MASTER_AUTO_POSITION=1, MASTER_USER='repl_user', MASTER_PASSWORD='xxx';
在老的 master 執(zhí)行如下命令:(具體執(zhí)行哪條,根據(jù)上面輸出來確定,區(qū)別是一個有日志的定位,一個是自動定位)
mysql> change master to master_host='192.168.1.57',master_user='repl_user',master_password='123456',master_log_file='mysql-bin.0000124',master_log_pos=234;
#或則
mysql> change master to master_host='192.168.1.57',master_user='repl_user',master_password='123456',MASTER_AUTO_POSITION=1;
mysql> start slave;
mysql> show slave status\G;
這樣,數(shù)據(jù)就開始同步到老的 master 上了。此時老的 master 已經(jīng)重新加入集群,變成 mha集群中的一個 slave 角色了。
(3)、在 manger 節(jié)點上重新啟動監(jiān)控進程
nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover /var/log/mha/app1/manager.log 2>&1 &
附:MHA切換階段的工作具體干了那些事
https://blog.csdn.net/shiyu1157758655/article/details/70242093
名稱欄目:mysql實現(xiàn)高可用架構(gòu)之MHA
轉(zhuǎn)載來源:http://www.5511xx.com/article/ccecpdc.html


咨詢
建站咨詢
