暂无图片
暂无图片
1
暂无图片
暂无图片
暂无图片

MySQL高可用MHA原理及实践

godba 2019-12-27
1803

一 MHA简介

 

MHAMaster High Availability)目前在MySQL高可用方面是一个相对成熟的解决方案,它由日本DeNA公司youshimaton(现就职于Facebook公司)开发,是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中,MHA能做到在0~30秒之内自动完成数据库的故障切换操作,并且在进行故障切换的过程中,MHA能在最大程度上保证数据的一致性,以达到真正意义上的高可用。

 

该软件由两部分组成:MHAManager(管理节点)和MHA Node(数据节点)。MHA Manager可以单独部署在一台独立的机器上管理多个master-slave集群,也可以部署在一台slave节点上。MHA Node运行在每台MySQL服务器上,MHA Manager会定时探测集群中的master节点,当master出现故障时,它可以自动将最新数据的slave提升为新的master,然后将所有其他的slave重新指向新的master。整个故障转移过程对应用程序完全透明。

 

MHA自动故障切换过程中,MHA试图从宕机的主服务器上保存二进制日志,最大程度的保证数据的不丢失,但这并不总是可行的。例如,如果主服务器硬件故障或无法通过ssh访问,MHA没法保存二进制日志,只进行故障转移而丢失了最新的数据。使用MySQL 5.5的半同步复制,可以大大降低数据丢失的风险。MHA可以与半同步复制结合起来。如果只有一个slave已经收到了最新的二进制日志,MHA可以将最新的二进制日志应用于其他所有的slave服务器上,因此可以保证所有节点的数据一致性。

 

目前MHA主要支持一主多从的架构,要搭建MHA,要求一个复制集群中必须最少有三台数据库服务器,一主二从,即一台充当master,一台充当备用master,另外一台充当从库,因为至少需要三台服务器,出于机器成本的考虑,淘宝也在该基础上进行了改造,目前淘宝TMHA已经支持一主一从。(出自:《深入浅出MySQL(第二版)》)

 

MHA架构:

 

 

 

MHA工作原理总结为以下几条:

1)从宕机崩溃的master保存二进制日志事件(binlog events;

2)识别含有最新更新的slave;

3)应用差异的中继日志(relay log) 到其他slave;

4)应用从master保存的二进制日志事件(binlog events);

5)提升一个slave为新master;

6)使用其他的slave连接新的master进行复制。



 

 

二 准备MySQL Replication环境

 

MAHMySQL复制环境有特殊要求,例如各节点都要开启二进制日志和中继日志,各从节点必须显式启用其read-only属性,并关闭relay-log-purge功能等,这里先对其配置做实现说明。

 

服务器信息

角色

IP

主机名

server_id

网卡

功能

MHA manager

192.168.0.11

Master



监控复制组

master

192.168.0.11

Master

1

ens160

接受写请求

candidate master

192.168.0.12

Slave01

2

ens160

接受读请求

slave

192.168.0.13

Slave02

3

ens160

接受读请求

 

实验架构如下:


 

 

 

#各节点的etc/hosts文件配置内容如下:

192.168.0.11 host1

192.168.0.12 host2

192.168.0.13 host3

 

 

#初始节点master的配置:

server_id=1

relay_log=relay-log

log_bin=master-log

 

#所有slave节点的配置如下:

server_id=2,3     #两个slave节点id号不同

relay_log=relay-log

log_bin=master-log

relay_log_purge=0

 

注意点:

1 不要将read_only=1写进从库的配置文件,因为主库宕机时,从库要提升为主库接受写请求,通过命令设置从节点为只读:  mysql -e"set globalread_only=1"

2 主从节点复制的过滤规则要相同,即binlog_do_db binlog_ignore_db 参数主从配置需要相同

3 从节点需要修改配置参数 relay_log_purge=0 ,即关闭中继日志的清除

 

三 配置主从架构

 

#启动Mysql服务

[root@node1 ~]# systemctl start mysql

[root@node2 ~]# systemctl start mysql

[root@node3 ~]# systemctl start mysql

 

#登入主节点

[root@node1 ~]# mysql

Mysql [(none)]> SHOW MASTERSTATUS;

+-------------------+----------+--------------+------------------+

|File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |

+-------------------+----------+--------------+------------------+

| master-log.000003|      245|             |                 |

+-------------------+----------+--------------+------------------+

 

#为一个用户授权

Mysql[(none)]> grant replication slave,replication client on *.* toslave@'192.168.%.%' identified by 'keer';

 

Mysql [(none)]> FLUSHPRIVILEGES;

 

#从节点host2配置

Mysql [(none)]> CHANGE MASTERTO MASTER_HOST='192.168.0.11',MASTER_USER='slave',MASTER_PASSWORD='keer',MASTER_LOG_FILE='mysql-bin.000003',MASTER_LOG_POS=245;

Mysql [(none)]> START SLAVE;

Mysql [(none)]> SHOW SLAVESTATUS\G;


#从节点host3配置

Mysql [(none)]> CHANGE MASTERTO MASTER_HOST='192.168.0.11',MASTER_USER='slave',MASTER_PASSWORD='keer',MASTER_LOG_FILE='mysql-bin.000003',MASTER_LOG_POS=245;

Mysql [(none)]> START SLAVE;

Mysql [(none)]> SHOW SLAVESTATUS\G;



 

 

 

四 安装MHA及配置

一、准备基于ssh互信通信环境

MHA集群中的各节点彼此之间均需要基于ssh互信互通,以实现远程控制及数据管理功能。简单起见,可在Manager节点生成密钥对儿,并设置其可远程连接本地主机后,将私钥文件及authorized_keys文件复制给余下的所有节点即可。

#下面的操作在manager节点操作即可

[root@node4 ~]# ssh-keygen -t rsa

[root@node4 ~]# cat .ssh/id_rsa.pub >.ssh/authorized_keys

[root@node4 ~]# chmod 600 .ssh/authorized_keys

 

[root@node4 ~]# scp -p .{id_rsa,authorized_keys}root@node1:/root/.ssh/

[root@node4 ~]# scp -p .{id_rsa,authorized_keys}root@node2:/root/.ssh/

[root@node4 ~]# scp -p .{id_rsa,authorized_keys}root@node3:/root/.ssh

 

或用以下方式:

 

host1上执行shell

ssh-keygen -t rsa

ssh-copy-id 192.168.0.12

ssh-copy-id 192.168.0.13

 

 

host2上执行shell

ssh-keygen -t rsa

ssh-copy-id 192.168.0.11

ssh-copy-id 192.168.0.13

 

 

host3上执行shell

ssh-keygen -t rsa

ssh-copy-id 192.168.0.12

ssh-copy-id 192.168.0.11

 

 

二、安装配置MHA

在host1上安装

1

2

yum localinstall -y mha4mysql-node-0.52-0.noarch

yum localinstall -y mha4mysql-manager-0.52-0.noarch.rpm

在host2/host3上安装

 

1

yum localinstall -y mha4mysql-node-0.52-0.noarch

在所有DB上面授权MHA管理账号

1

mysql> grant all on *.* to mha@'192.168.30.%' identified by '123456';

在host1上面

先新建一个工作目录  mkdir mha

编辑配置文件 vi etc/masterha_default.cnf


验证SSH互认是否成功

[root@monitor ~]# masterha_check_ssh--conf=/etc/masterha_default.cnf

 

下一步

检查mysql主从复制


 


 

报错:

那是不是主从检查没通过呢,其实不是得,这是个坑,关键报错在这句

 

1

Can't locate MHA/BinlogManager.pm in @INC (@INC contains: /usr/local/lib64/perl5 /usr/local/share/perl5 /usr/lib64/perl5/vendor_perl /usr/share/perl5/vendor_perl /usr/lib64/perl5 /usr/share/perl5 .) at /usr/bin/apply_diff_relay_logs line 24

百度一下结果是这样的

http://ronaldbradford.com/blog/mysql-mha-and-perl-pathing-2013-08-26/

解决办法是在5台机器上面做软连接,把这个32位的依赖链接到64位的支持库里面去

 

1

ln -s /usr/lib/perl5/vendor_perl/MHA /usr/lib64/perl5/vendor_perl/

解决完之后,再执行检查,又报错这次报错提示找不到mysqlbinlog命令

 

1

Can't exec "mysqlbinlog": No such file or directory at /usr/lib64/perl5/vendor_perl/MHA/BinlogManager.pm line 99.

我的mysql是编译安装的,添加了mysql bin目录的环境变量的,但是它竟然提示找不到这个命令,可能是没有读取/etc/profile文件吧,那我们就再做软连接到系统目录好了

解决:在所有db执行

1

[root@db4 ~]#ln -s /usr/local/mysql/bin/mysqlbinlog /usr/bin/mysqlbinlog

再来检查,又错,再看

这次报错提示

1

 Testing mysql connection and privileges..sh: mysql: command not found

那好吧,跟上面一样,软连接

 

1

[root@db4 ~]# ln -s /usr/local/mysql/bin/mysql /usr/bin/mysql

问题解决

 



文章转载自godba,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论