MHA 高可用集群详解

1、什么是MHA

• 传统的主从复制若是主库宕机，其他从库不会自动的代替主库继续工做，这样就不能保证业务的高可用，而MHA就是一个mysql主从复制高可用的解决方案，当主库宕机后，MHA能在1-30秒实现故障检测和故障自动转移，选择一个最优的从库做为主库，同时新的主库还继续与其余从库保持数据一致的状态

2、MHA架构组成

• 整个MAH架构由两部分组成，即MHA Manager(管理节点)，和MHA Node(数据节点)，MHA Manager 能够独立部署到一台服务器上（含虚拟机）管理多个主从复制集群，也可已部署到一台主从复制从节点上或者其余应用程序上，而MHA Node 须要运行到每一台mysql服务器上 MHA Manager服务器 会定时经过主库上的MHA Node检测主库的运行状态，当主库出现故障时他能够将最优从库（能够提早指定或者由MHA断定）提高为新的主库，而后其余从库和新的主库从新保持新的复制状态

3、MHA工做原理

• 主库实例挂掉可是ssh还能链接
  一、监控到主库宕机，选择一个新的主，被选择的新主会取消从库的角色（ reset slave）
  选择标准：
  一是根据其余从库的binlog日志的位置选择最新的从库做为新的主库
  二是若是设置了半同步从库，直接选择半同从库做为新的主库
  二、从库经过MHA自带的脚本程序，经过ssh向主库索取缺失部分的binlog
  三、其余从库与新的主库重新构建主从，继续提供服务
  四、若是由vip机制，将VIP从原来的主库漂移到新的主库，让应用无感知
• 主节点服务器宕机（ssh已经链接不上了）
  一、监控到主机宕机后，尝试ssh链接，链接失败
  二、经过上边所讲的选择标准选择新的主库
  三、计算从库之间的relay-log的差别，补偿到新的其余从库
  四、其余从库重新与新主构建主从关系，继续提供服务
  五、若是由VIP机制，将VIP从原主漂移到新主，让应用无感知
  六、若是有binlog server 机制，会继续将binlog server中缺失的事物，补偿到新的主库

  4、MHA实现

一、三台以上MySQL独立节点实例，节点之间网络正常通讯，配置hosts解析
10.0.0.51 主
10.0.0.52 从
10.0.0.53 从 and manager
二、开启GTID复制结构 （show slave status\G）
三、关闭各个结点relay-log自动删除的功能 (show variables like '%relay%')
vim /etc/my.cnf
relay_log_purge=0
set global relay_log_purge=0;
四、主库建立mha管理用户
grant all privileges on . to mha@'10.0.0.%' identified by 'mha'; （会同步到其从节点）
五、配置软链接（mha只能调用/usr/bin/下的命令）
ln -s /application/mysql/bin/mysqlbinlog /usr/bin/mysqlbinlog
ln -s /application/mysql/bin/mysql /usr/bin/mysql
六、各节点部署node工具包及依赖包
安装依赖包rpm -ivh perl-DBD-MySQL
安装node节点：rpm -ivh mha4mysql-node-0.56-0.el6.noarch.rpm（全部实例都要安装）
七、选择其中一个从节点进行部署manager工具包
安装依赖：yum install -y perl-Config-Tiny epel-release perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes
安装manager节点： rpm -ivh mha4mysql-manager-0.56-0.el6.noarch.rpm
八、在manager上建立配置mah必需要有的工做目录和文件
mkdir -p /etc/mha
mkdir -p /var/log/mha/app1 （能够管理多套主从复制）
建立配置文件 (不须要的配置不要留着，注释没用,切换后会重写)
vim /etc/mha/app1.cnf （serverdefault能够独立）
[server default]
manager_log=/var/log/mha/app1/manager
manager_workdir=/var/log/mha/app1
master_binlog_dir=/data/binlog
user=mha
password=mha
ping_interval=2
repl_password=123
repl_user=repl
ssh_user=root

[server1]
hostname=10.0.0.51
port=3306

[server2]
hostname=10.0.0.52
port=3306

[server3]
hostname=10.0.0.53
port=3306

九、各节点ssh秘钥互信配置

ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa >/dev/null 2>&1

ssh-copy-id -i /root/.ssh/id_dsa.pub root@10.0.0.51
ssh-copy-id -i /root/.ssh/id_dsa.pub root@10.0.0.52
ssh-copy-id -i /root/.ssh/id_dsa.pub root@10.0.0.53

十、检查互信
masterha_check_ssh --conf=/etc/mha/app1.cnf
十一、检测主从
masterha_check_repl --conf=/etc/mha/app1.cnf
十二、开启MHA功能
nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/app1/manager.log 2>&1 &
1三、查看启动结果
tail -f /var/log/mha/app1/manager
10.0.0.51(10.0.0.51:3306) (current master)
+--10.0.0.52(10.0.0.52:3306)
+--10.0.0.53(10.0.0.53:3306)
masterha_check_status --conf=/etc/mha/app1.cnf

5、mha故障模拟切换

mha的重点不在于搭建mha,而在于当出现了出现故障以后如何切换和恢复
一、故障模拟，停掉主库，查看manager观察切换过程
tail -f /var/log/mha/app1/manager
二、开启主库（模拟主库已经修好），将原主库重新加入到主从环境
CHANGE MASTER TO MASTER_HOST='10.0.0.52', MASTER_PORT=3306, MASTER_AUTO_POSITION=1, MASTER_USER='repl', MASTER_PASSWORD='xxx';
start slave;
三、将原主库的信息从新加入到manager的配置文件中，配置文件为/etc/mha/app1.cnf（mha故障切换成功后会自动把原主库的信息在配置文件中删除掉）
四、启动mha manager程序（切换成功后manager程序会自动退出）
nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/app1/manager.log 2>&1 &
五、查看启动mha状态
masterha_check_status --conf=/etc/mha/app1.cnf

六 、MHAvip地址漂移

一、上传master_ip_failover 文件到 /usr/local/bin/下边
而后修改编码 dos2unix /usr/local/bin/master_ip_failover
二、添加master_ip_failover_script=/usr/local/bin/master_ip_failover到mha的配置文件中/etc/mha/app1.cnf
三、重启mha
masterha_stop --conf=/etc/mha/app1.cnf

nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/app1/manager.log 2>&1 &
四、手工在主库上绑定vip，注意必定要和配置文件中的ethN一致，个人是eth0:1(1是key指定的值)

ifconfig eth0:1 10.0.0.55/24
五、停主库，看vip地址是否漂移成功

7、binlogserver配置使用

binlogserver是配置在MHA环境中单独用来保存主库二进制日志的服务器，要求这台服务器必需要有5.6以上的版本，支持gtid并开启
一、配置manager程序上配置binlogserver
vim /etc/mha/app1.cnf
[binlog1]
no_master=1
hostname=10.0.0.53
master_binlog_dir=/data/mysql/binlog
二、提早在binlogserver上建立这两个目录
mkdir -p /data/mysql/binlog
chown -R mysql.mysql /data/mysql/*

三、修改完成后，将主库binlog拉过来（从000001开始拉，以后的binlog会自动按顺序过来）

cd /data/mysql/binlog --->必须进入到本身建立好的目录
mysqlbinlog -R --host=10.0.0.52 --user=mha --password=mha --raw --stop-never mysql-bin.000001 &

四、重启mha生效
masterha_stop --conf=/etc/mha/app1.cnf

nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/app1/manager.log 2>&1 &

masterha_check_status --conf=/etc/mha/app1.cnf

8、mha的其余参数

ping_interval=2 manager检测节点存活的间隔时间，总共会探测4次。#设置为候选master，若是设置该参数之后，发生主从切换之后将会将此从库提高为主库，即便这个主库不是集群中事件最新的slavecandidate_master=1#默认状况下若是一个slave落后master 100M的relay logs的话，MHA将不会选择该slave做为一个新的master，由于对于这个slave的恢复须要花费很长时间，经过设置check_repl_delay=0,MHA触发切换在选择一个新的master的时候将会忽略复制延时，这个参数对于设置了candidate_master=1的主机很是有用，由于这个候选主在切换的过程当中必定是新的mastercheck_repl_delay=0