MHA（Master High Availability）目前在 MySQL 高可用方面是一个相对成熟的解决方案，它由 日本 DeNA 公司 youshimaton（现就职于 Facebook 公司）开发，是一套优秀的作为 MySQL 高可用性环境下故障切换和主从提升的高可用软件。
在 MySQL 故障切换过程中，MHA 能做 到在 0~30 秒之内自动完成数据库的故障切换操作，并且在进行故障切换的过程中，MHA 能 在最大程度上保证数据的一致性，以达到真正意义上的高可用。 MHA 里有两个角色一个是 MHA Node（数据节点）另一个是 MHA Manager（管理节点）。 MHA Manager 可以单独部署在一台独立的机器上管理多个 master-slave 集群，也可以部署在 一台 slave 节点上。MHA Node 运行在每台 MySQL 服务器上，MHA Manager 会定时探测集群 中的master节点，当master出现故障时，它可以自动将最新数据的slave提升为新的master， 然后将所有其他的 slave 重新指向新的 master。整个故障转移过程对应用程序完全透明。
在 MHA 自动故障切换过程中，MHA 试图从宕机的主服务器上保存二进制日志，最大程度的 保证数据的不丢失，但这并不总是可行的。
例如，如果主服务器硬件故障或无法通过 ssh 访 问，MHA 没法保存二进制日志，只进行故障转移而丢失了最新的数据。使用 MySQL 5.5 的 半同步复制，可以大大降低数据丢失的风险。MHA 可以与半同步复制结合起来。如果只有 一个 slave 已经收到了最新的二进制日志，MHA 可以将最新的二进制日志应用于其他所有的 slave 服务器上，因此可以保证所有节点的数据一致性。 注：从 MySQL5.5 开始，MySQL 以插件的形式支持半同步复制。
如何理解半同步呢？首先我 们来看看异步，全同步的概念： 异步复制（Asynchronous replication） MySQL 默认的复制即是异步的，主库在执行完客户端提交的事务后会立即将结果返给给客 户端，并不关心从库是否已经接收并处理，这样就会有一个问题，主如果 crash 掉了，此时 主上已经提交的事务可能并没有传到从上，如果此时，强行将从提升为主，可能导致新主上 的数据不完整。 全同步复制（Fully synchronous replication） 指当主库执行完一个事务，所有的从库都执行了该事务才返回给客户端。因为需要等待所有 从库执行完该事务才能返回，所以全同步复制的性能必然会收到严重的影响。 半同步复制（Semisynchronous replication） 介于异步复制和全同步复制之间，主库在执行完客户端提交的事务后不是立刻返回给客户端， 而是等待至少一个从库接收到并写到 relay log 中才返回给客户端。相对于异步复制，半同步 复制提高了数据的安全性，同时它也造成了一定程度的延迟，这个延迟最少是一个 TCP/IP 往返的时间。所以，半同步复制最好在低延时的网络中使用。 下面来看看半同步复制的原理图：
总结：异步与半同步异同
默认情况下 MySQL 的复制是异步的，Master 上所有的更新操作写入 Binlog 之后并不确保所 有的更新都被复制到 Slave 之上。异步操作虽然效率高，但是在 Master/Slave 出现问题的时 候，存在很高数据不同步的风险，甚至可能丢失数据。 MySQL5.5 引入半同步复制功能的目的是为了保证在 master 出问题的时候，至少有一台 Slave 的数据是完整的。在超时的情况下也可以临时转入异步复制，保障业务的正常使用，直到一 台 salve 追赶上之后，继续切换到半同步模式。
工作原理
相较于其它 HA 软件，MHA 的目的在于维持 MySQL Replication 中 Master 库的高可用性，其 最大特点是可以修复多个 Slave 之间的差异日志，最终使所有 Slave 保持数据一致，然后从 中选择一个充当新的 Master，并将其它 Slave 指向它。 -从宕机崩溃的 master 保存二进制日志事件(binlogevents)。 -识别含有最新更新的 slave。 -应用差异的中继日志(relay log)到其它 slave。 -应用从 master 保存的二进制日志事件(binlogevents)。 -提升一个 slave 为新 master。 -使其它的 slave 连接新的 master 进行复制。
目前 MHA 主要支持一主多从的架构，要搭建 MHA,要求一个复制集群中必须最少有三台数 据库服务器，一主二从，即一台充当 master，一台充当备用 master，另外一台充当从库，
因为至少需要三台服务器。
接下来部署 MHA，具体的搭建环境如下
其中 master 对外提供写服务，备选 master（实际的 slave，主机名 centos3）提供读服务，slave 也提供相关的读服务，一旦 master 宕机，将会把备选 master 提升为新的 master，slave 指向 新的 master，manager 作为管理服务器。
一、基础环境准备
1、 在配置好 IP 地址后检查 selinux，iptables 设置，关闭 selinux ，iptables 服务以便后期主 从同步不出错
注：时间要同步
vim /etc/chrony.conf
配置hosts文件： vim /etc/hosts
2、 在四台机器都配置 epel 源
yum install epel-release
1、 在所有主机上安装 mha 所依赖的软件包（需要系统自带的 yum 源并联网）
# yum -y install perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager perl-Config-IniFiles ncftp perl-Params-Validate perl-CPAN perl-Test-Mock-LWP.noarch perl-LWP-Authen-Negotiate.noarch perl-devel perl-ExtUtils-CBuilder perl-ExtUtils-MakeMaker
3、建立 ssh 无交互登录环境
Manager 主机：
或者： for i in master1 master2 slave manager ; do ssh-copy-id -i /root/.ssh/id_rsa.pub %i; done
Master 主机：
或者： for i in master1 master2 slave manager ; do ssh-copy-id -i /root/.ssh/id_rsa.pub %i; done
master2主机：
或者： for i in master1 master2 slave manager ; do ssh-copy-id -i /root/.ssh/id_rsa.pub %i; done
Slave 主机：
或者： for i in master1 master2 slave manager ; do ssh-copy-id -i /root/.ssh/id_rsa.pub %i; done
测试 ssh 无交互登录 （都ssh一下）
举例： ssh master2，slave，manager
二、配置 mysql 半同步复制
为了尽可能的减少主库硬件损坏宕机造成的数据丢失，因此在配置 MHA 的同时建议配置成 MySQL 的半同步复制。
注：mysql 半同步插件是由谷歌提供，具体位置/usr/local/mysql/lib/plugin/下，一个是 master 用的 semisync_master.so，一个是 slave 用的 semisync_slave.so，下面我们就来具体配置一下。 如果不清楚 Plugin 的目录，用如下查找：
1、分别在主从节点上安装相关的插件（master, Candicate master,slave） 在 MySQL 上安装插件需要数据库支持动态载入。检查是否支持，用如下检测：
所有 mysql 数据库服务器，安装半同步插件(semisync_master.so,semisync_slave.so)（除manager外）
其他 mysql 主机采用同样的方法安装
检查 Plugin 是否已正确安装：
mysql> show plugins;
或
mysql> select * from information_schema.plugins;
查看半同步相关信息
上图可以看到半同复制插件已经安装，只是还没有启用，所以是 off
2、修改 my.cnf 文件，配置主从同步：
注：若主 MYSQL 服务器已经存在，只是后期才搭建从 MYSQL 服务器，在置配数据同步前应 先将主 MYSQL 服务器的要同步的数据库拷贝到从 MYSQL 服务器上（如先在主 MYSQL 上备 份数据库，再用备份在从 MYSQL 服务器上恢复）
master2主机：
查看半同步相关信息
mysql>show variables like ‘%rpl_semi_sync%’;
查看半同步状态：
mysql>show status like ‘%rpl_semi_sync%’;
master 主机：
第一条 grant 命令是创建一个用于主从复制的帐号，在 master 和 master2 的主机上 创建即可。
第二条 grant 命令是创建 MHA 管理账号，所有 mysql 服务器上都需要执行。MHA 会在配置 文件里要求能远程登录到数据库，所以要进行必要的赋权。
master2主机：
查看从的状态，以下两个值必须为 yes,代表从服务器能正常连接主服务器
Slave_IO_Running:Yes
Slave_SQL_Running:Yes
Slave 主机：
查看从的状态，以下两个值必须为 yes,代表从服务器能正常连接主服务器
Slave_IO_Running:Yes
Slave_SQL_Running:Yes
查看 master 服务器的半同步状态：
mysql>show status like ‘%rpl_semi_sync%’;
三、配置 mysql-mha
mha 包括 manager 节点和 data 节点，data 节点包括原有的 MySQL 复制结构中的主机，至少 3台，即1主2从，当masterfailover后，还能保证主从结构；只需安装node包。manager server： 运行监控脚本，负责 monitoring 和 auto-failover；需要安装 node 包和 manager 包。（因为上边已经装了 所以就不用了）
1、 在所有主机上安装 mha 所依赖的软件包（需要系统自带的 yum 源并联网）
# yum -y install perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager perl-Config-IniFiles ncftp perl-Params-Validate perl-CPAN perl-Test-Mock-LWP.noarch perl-LWP-Authen-Negotiate.noarch perl-devel perl-ExtUtils-CBuilder perl-ExtUtils-MakeMaker
2、 以下操作管理节点需要两个都安装， 在 3 台数据库节点只要安装 MHA 的 node 节点：
在所有数据库节点上安装 mha4mysql-node-0.56.tar.gz （master1 master2 slave 装）
其他两个数据节点也安装 mha4mysql-node-0.56.tar.gz（过程略）
在管理节点需要两个都安装：mha4mysql-node-0.56.tar.gz 和 mha4mysql-manager-0.56.tar.gz 安装 mha4mysql-node-0.56.tar.gz （manager）
根据提示输入。
3、 配置 mha
与绝大多数 Linux 应用程序类似，MHA 的正确使用依赖于合理的配置文件。MHA 的配置文 件与 mysql 的 my.cnf 文件配置相似，采取的是 param=value 的方式来配置，配置文件位于管 理节点，通常包括每一个 mysql server 的主机名，mysql 用户名，密码，工作目录等等。 编辑/etc/masterha/app1.conf，内容如下：
保存退出 （相当于把他清空）
SSH 有效性验证： [root@centos1 ~]
# masterha_check_ssh --global_conf=/etc/masterha/masterha_default.cnf --conf=/etc/masterha/app1.cnf
集群复制的有效性验证：
mysql 必须都启动 [root@centos1 ~]
# masterha_check_repl --global_conf=/etc/masterha/masterha_default.cnf --conf=/etc/masterha/app1.cnf
注：验证成功的话会自动识别出所有服务器和主从状况 在验证时，
若遇到这个错误：Can't exec "mysqlbinlog" ...... 解决方法是在所有服务器上执行：
ln -s /usr/local/mysql/bin/* /usr/local/bin/
启动 manager：
注：在应用 Unix/Linux 时，我们一般想让某个程序在后台运行，于是我们将常会用 & 在程 序结尾来让程序自动运行。比如我们要运行 mysql 在后台： /usr/local/mysql/bin/mysqld_safe –user=mysql &。可是有很多程序并不想 mysqld 一样，这样我们就需要 nohup 命令，
状态检查：
故障转移验证：(自动 failover)
master dead 后，MHA 当时已经开启，候选 Master 库（Slave）会自动 failover 为 Master. 验证的方式是先停掉 master（centos2），因为之前的配置文件中，把 Candicate master(centos3)作为了候选人，那么就到 slave(centos4) 上查看 master 的 IP 是否 变为了 centos3 的 IP
1)停掉 master 在 master（192.168.1.102） 上把 mysql 停掉
2)查看 MHA 日志 上面的配置文件中指定了日志位置为 /masterha/app1/manager.log [root@centos1 ~]
# cat /masterha/app1/manager.log
查看 slave 状态
mysql> show slave status\G;
*************************** 1. row ***************************
Slave_IO_State: Waiting for master to send event Master_Host: 192.168.1.103 Master_User: mharep Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin.000009 Read_Master_Log_Pos: 107 Relay_Log_File: relay-bin.000002 Relay_Log_Pos: 253 Relay_Master_Log_File: mysql-bin.000009 Slave_IO_Running: Yes Slave_SQL_Running: Yes
1） 检查是否有下列文件，有则删除。
2） 发生主从切换后，MHAmanager 服务会自动停掉，且在 manager_workdir（/masterha/app1） 目录下面生成文件 app1.failover.complete，若要启动 MHA，必须先确保无此文件) 如果有这个提示，那么删除此文件
/masterha/app1/app1.failover.complete [error][/usr/share/perl5/vendor_perl/MHA/MasterFailover.pm, ln298] Last failover was done at 2015/01/09 10:00:47. Current time is too early to do failover again. If you want to do failover, manually remove / masterha/app1/app1.failover.complete and run this script again.
1） 检查是否有下列文件，有则删除。
2） 发生主从切换后，MHAmanager 服务会自动停掉，且在 manager_workdir（/masterha/app1） 目录下面生成文件 app1.failover.complete，若要启动 MHA，必须先确保无此文件) 如果有这个提示，那么删除此文件
/masterha/app1/app1.failover.complete [error][/usr/share/perl5/vendor_perl/MHA/MasterFailover.pm, ln298] Last failover was done at 2015/01/09 10:00:47. Current time is too early to do failover again. If you want to do failover, manually remove / masterha/app1/app1.failover.complete and run this script again.
1） #ll /masterha/app1/app1.failover.complete
2） # ll /masterha/app1/app1.failover.error
2）检查 MHA 复制检查：（需要把 master 设置成 master2 的从服务器）在master1上
（相当于把下边第七步命令复制过来）
4）启动MHA：
#nohup masterha_manager --conf=/etc/masterha/app1.cnf &>/tmp/mha_manager.log &
当有 slave 节点宕掉时，默认是启动不了的，加上 --ignore_fail_on_start 即使有节点宕掉也 能启动 MHA，如下：
#nohup masterha_manager --conf=/etc/masterha/app1.cnf --ignore_fail_on_start &>/tmp/mha_manager.log &
5） 检查状态： # masterha_check_status --conf=/etc/masterha /app1.cnf
6）检查日志：#tail -f /masterha/app1/manager.log
7） 主从切换后续工作
重构：
重构就是你的主挂了，切换到master2 上， master2 变成了主，因此重构的 一种方案原主库修复成一个新的 slave 主库切换后，把原主库修复成新从库，然后重新执行以上 5 步。原主库数据文件完整的情况 下，可通过以下方式找出最后执行的 CHANGE MASTER 命令：
[root@centos1 ~]# grep "CHANGE MASTER TO MASTER" /masterha/app1/manager.log | tail -1 Wed Sep 28 22:36:41 2016 - [info] All other slaves should start replication from here. Statement should be: CHANGE MASTER TO MASTER_HOST='192.168.1.103', MASTER_PORT=3306, MASTER_LOG_FILE='mysql-bin.000009', MASTER_LOG_POS=107, MASTER_USER='mharep', MASTER_PASSWORD='xxx';
定期删除中继日志 在配置主从复制中，slave 上设置了参数 relay_log_purge=0，所以 slave 节点需要定期删除中 继日志，建议每个 slave 节点删除中继日志的时间错开。
corntab -e 0 5 * * * /usr/local/bin/purge_relay_logs - -user=root --password=pwd123 --port=3306 --disable_relay_log_purge >> /var/log/purge_relay.log 2>&1