MySQL 高可用性—keepalived+mysql双主(有详细步骤和全部配置项解释)

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介:

博主QQ:819594300

博客地址:http://zpf666.blog.51cto.com/

有什么疑问的朋友可以联系博主,博主会帮你们解答,谢谢支持!

前言:生产环境中一台mysql主机存在单点故障,所以我们要确保mysql的高可用性,即两台MySQL服务器如果其中有一台MySQL服务器挂掉后,另外一台能立马接替其进行工作。

MySQL的高可用方案一般有如下几种:

keepalived+双主,MHA,PXC,MMM,Heartbeat+DRBD等,比较常用的是keepalived+双主,MHA和PXC。

本节主要介绍了利用 keepalived 实现 MySQL 数据库的高可用。

Keepalived+mysql双主来实现MySQL-HA,我们必须保证两台MySQL数据库的数据完全一样,基本思路是两台MySQL互为主从关系,通过Keepalived配置虚拟IP,实现当其中的一台MySQL数据库宕机后,应用能够自动切换到另外一台MySQL数据库,保证系统的高可用。

拓扑环境

OS:centos7.2x86_64

Mysql版本:mysql5.7.13

Keepalived: keepalived-1.2.20

Mysql-vip:192.168.1.150

Mysql-master1:192.168.1.100

Mysql-master2:192.168.1.200

一、   配置两台mysql主主同步

wKiom1jnLHuR3l7HAAHYSz089fw044.jpg

该过程的第一部分就是master记录二进制日志。在每个事务更新数据完成之前,master在二日志记录这些改变。MySQL将事务写入二进制日志。在事件写入二进制日志完成后,master通知存储引擎提交事务。

下一步就是slave将master的binarylog拷贝到它自己的中继日志。首先,slave开始一个工作线程——I/O线程。I/O线程在master上打开一个普通的连接,然后开始binlog dump process。Binlog dump process从master的二进制日志中读取事件,如果已经同步了master,它会睡眠并等待master产生新的事件。I/O线程将这些事件写入中继日志。

SQL slave thread(SQL从线程)处理该过程的最后一步。SQL线程从中继日志读取事件,并重放其中的事件而更新slave的数据,使其与master中的数据一致。只要该线程与I/O线程保持一致,中继日志通常会位于OS的缓存中,所以中继日志的开销很小。

主主同步就是两台机器互为主的关系,在任何一台机器上写入都会同步。

若mysql主机开启了防火墙,需要关闭防火墙或创建规则

实验具体过程如下:

1、修改MySQL配置文件

wKiom1jnLIey1ApkAAPgbbhDvwo982.jpg

wKioL1jnLJCDQWtvAAMYwyVd-oc720.jpg

注意:mysql1和mysql只有server-id不同和auto-increment-offset不同,其他必须相同。

部分配置项解释如下

binlog_format= mixed:指定mysql的binlog日志的格式,mixed是混合模式。

relay-log:开启中继日志功能

relay-log-index:中继日志清单

auto-increment-increment= 2:表示自增长字段每次递增的量,其默认值是1。它的值应设为整个结构中服务器的总数,本案例用到两台服务器,所以值设为2。

auto-increment-offset= 2:用来设定数据库中自动增长的起点(即初始值),因为这两能服务器都设定了一次自动增长值2,所以它们的起点必须得不同,这样才能避免两台服务器数据同步时出现主键冲突。

注:另外还可以在my.cnf配置文件中,添加“binlog_do_db=数据库名”配置项(可以添加多个)来指定要同步的数据库。如果配置了这个配置项,如果没添加在该配置项后面的数据库,则binlog不记录它的事件。

2、将mysql1设为mysql2的主服务器

在mysql1主机上创建授权账户,允许在mysql2(192.168.1.200)主机上连接

wKioL1jnLJGgbqmKAAC60NyNk-A967.jpg

查看mysql1的当前binlog状态信息:

wKiom1jnLJPAISjhAADr3DabXe8300.jpg

在mysql2上将mysql1设为自已的主服务器并开启slave功能:

wKiom1jnLJaC1RRIAADrr-KsmSE920.jpg

下面看一看mysql2的状态:

wKioL1jnLJ2g1CLhAALhaSE39eE948.jpg

wKiom1jnLJ_BLHK5AAC94hdtBQQ794.jpg

在mysql1防火墙上开启3306/tcp例外:

wKiom1jnLKLBx7TmAAEVHooj98k364.jpg

顺道把mysql2的防火墙也开启3306/tcp例外,反正后面实验还是要开,那就现在一道开了吧:

wKioL1jnLKaA03eQAAErx1O-rno921.jpg

再次查看mysql2的状态:

wKiom1jnLK2DcGcKAAISmuwZaNs964.jpg

wKiom1jnLK2CaaEQAADnRPu3QrA960.jpg

更换mysql2的UUID号:

wKioL1jnLK2R4MlgAAHc_Bc8c8E991.jpg

修改完UUID必须重启mysqld服务才能生效:

wKiom1jnLK6TLZzSAAExMKaDPM4413.jpg

这次再来查看mysql2的状态:

wKioL1jnLK-TTZwkAAJU4I82V9c066.jpg

3、现在反过来·,再将mysql2设为mysql1的主服务器

在mysql2主机上创建授权账户,允许在mysql1(192.168.1.100)主机上连接

wKioL1jnLK-i0v6hAAC4h5C1iHQ170.jpg

查看mysql2的当前binlog状态信息:

wKiom1jnLLDgIaGrAADlVt7630A610.jpg

在mysql1上将mysql2设为自已的主服务器并开启slave功能:

wKioL1jnLLDRV4z_AADl5W2gM4M735.jpg

查看mysql1的状态:

wKiom1jnLLHD9XJXAAJfFeYTHK8663.jpg

4、测试主主同步

在mysql1上创建要同步的数据库如bdqn,并在bdqn中创建一张测试表叫it

wKioL1jnLLHQf1HUAAFMrZIy6vI976.jpg

查看mysql2主机是否同步了mysql1上的数据变化:

wKiom1jnLLLC8v1rAAHqIozz_CA612.jpg

从上图可以看出mysql2同步了mysql1的数据变化

现在往mysql2主机上向it表中插入两行数据:

wKiom1jnLLLDwwu3AAH9V7F283s122.jpg

查看mysql1主机是否同步了mysql2上的数据变化:

wKioL1jnLLKw2CR8AAGRKIpxkQ8557.jpg

总结:至此现在任何一台MySQL上更新数据都会同步到另一台MySQL,MySQL同步完成。

注意:若主MYSQL服务器已经存在,只是后期才搭建从MYSQL服务器,在置配数据同步前应先将主MYSQL服务器的要同步的数据库拷贝到从MYSQL服务器上(如先在主MYSQL上备份数据库,再用备份在从MYSQL服务器上恢复)

 


下面我们就完成keepalived的高可用性:

说明:keepalived是集群管理中保证集群高可用的一个软件解决方案,其功能类似于heartbeat,用来防止单点故障

keepalived是以VRRP协议为实现基础的,VRRP全称VirtualRouter Redundancy Protocol,即虚拟路由冗余协议。

虚拟路由冗余协议,可以认为是实现路由器高可用的协议,即将N台提供相同功能的路由器组成一个路由器组,这个组里面有一个master和多个backup,master上面有一个对外提供服务的vip,master会发组播(组播地址为224.0.0.18),当backup收不到vrrp包时就认为master宕掉了,这时就需要根据VRRP的优先级来选举一个backup当master,这样的话就可以保证路由器的高可用了

keepalived主要有三个模块,分别是core 、check和vrrp。core模块为keepalived的核心,负责主进程的启动、维护以及全局配置文件的加载和解析。check负责健康检查,包括常见的各种检查方式。vrrp模块是来实现VRRP协议的。

 

二、keepalived的安装配置

1、在mysql1和mysql2两台服务器上安装keepalived的几个依赖包

wKiom1jnLLORWQJwAAB1GsjZ0RM267.jpg

注意:如不知道keepalived需要哪些依赖包,可到下载后的源码解压目录下查看INSTALL 文件内容,安装需要的依赖包,源码安装任何一个软件都要养成查看源码包文档的习惯,比如INSTALL,README,doc等文档,可以获得很多有用的信息。

下面我们来看一看keepalived的INSTALL文件:

wKioL1jnLLOxEGWSAAF6gWxpz_8831.jpg

2、在两台mysql上都开始解压缩编译安装keepalived

wKioL1jnLLOzz6n0AADPbqZQxVE640.jpg

:如果你使用的是centos6.5版本,则配置编译装的时候要这样写,如下图所示:

wKiom1jnLLTT05AgAACmwUh0ouU884.jpg

3、执行make install操作之后,会自动生成/etc/init.d/keepalived脚本文件,但还需要手动添加为系统服务,这样就可以使用service、chkconfig工具来对keepalived服务程序进行管理了。

wKiom1jnLLTDedvJAAESpUpb7XA654.jpg

4、若开启了防火墙,则需要关闭防火墙或者建富策略(现实生产环境中,都不允许关防火墙的,所以我们还是建富策略为第一选择)(两台mysql都需要操作)

wKioL1jnLLSA8xeUAACaeQKSKVM344.jpg

5、修改keepalived的配置文件

说明:keepalived只有一个配置文件keepalived.conf,里面主要包括以下几个配置区域,分别是:

global_defs、vrrp_instance和virtual_server。

  • global_defs:主要是配置故障发生时的通知对象以及机器标识。

  • vrrp_instance:用来定义对外提供服务的VIP区域及其相关属性。

  • virtual_server:虚拟服务器定义

wKiom1jnLLWCTZqjAAEhFi9071s627.jpg

wKiom1jnLLWzzwNCAAK3OBVf8iQ452.jpg

看不清截图的可以看下面的粘贴的文字:

! Configuration File for keepalived

 

global_defs {

  router_id mysql-1

}

 

vrrp_instance VI_1 {

   state BACKUP

   interface eno16777736

   virtual_router_id 51

   priority 100

   advert_int 1

   nopreempt

   authentication {

       auth_type PASS

       auth_pass 1111

   }

   virtual_ipaddress {

       192.168.1.150

   }

}

 

virtual_server 192.168.1.150 3306 {

   delay_loop 2

   lb_algo rr

   lb_kind DR

   persistence_timeout 60

   protocol TCP

 

   real_server 192.168.1.100 3306 {

       weight 3

       notify_down    /etc/keepalived/bin/mysql.sh

       TCP_CHECK {

            connect_timeout 3

            nb_get_retry 3

            delay_before_retry 3

            connect_port 3306

       }

   }

}

每个配置项的解释如下:

wKioL1jnLLbwBLWJAAND2YVoXRM716.jpg

wKioL1jnLODheqrjAANF2XgFeuc652.jpg

同样的也需要修改mysql2的keepalived配置文件(下图中绿色部分为和mysql1不一样的地方)

可以使用scp命令把mysql1主机上配置好的keepalived.conf文件拷贝到server2主机,只需要改绿色部分即可:

wKiom1jnLOGw8qmPAAH_RyWHGjY216.jpg

6、启动keepalived服务(两台都要启动)

wKioL1jnLOHhuzIkAACMRtWOZDE239.jpg

7、mysql1和mysql2上都需要添加检测脚本

作用:是当mysql停止工作时自动关闭本机的keeplived,从而实现将故障主机踢出热备组,因每台机器上keepalived只添加了本机为realserver,所以当mysqld正常启动后,我们还需要手动启动keepalived服务。

wKioL1jnLOHDYjlGAADV21Ou_V0874.jpg

wKiom1jnLOKT0amfAADeX5kw9Nw004.jpg

8、给mysql.sh脚本赋予可执行权限(两台mysql都操作同样的步骤)

wKioL1jnLOLjBpjgAACjKpZRP_s633.jpg

9、在mysql1和mysql2上分别执行ip addr show dev eno16777736命令查看mysql1和mysql2对VIP(群集虚拟IP)的控制权

wKioL1jnLObRO7kAAAFZrDE0A4I304.jpg

wKiom1jnLOijvuALAAEc-Tbq9lQ042.jpg

从上图可以看出mysql1是master,mysql2是slave。

10、停止mysql1的mysql服务,看keepalived健康检查程序是否会触发了我们编写的脚本,进行自动故障切换

wKioL1jnLOryIVO7AAEMVrMAETs562.jpg

wKioL1jnLO6DeS-AAAFTTbamlgs692.jpg

从上图可以说明在master服务器的mysql服务发生故障时,mysql1主机触发了我们编写的脚本,发生了自动故障切换。

11、现在我们把mysql1的mysql服务开起来,并且keepalived的服务也需要手动开启

wKiom1jnLPLg6lOkAAEIC75-c1Q029.jpg

12、我们再次在两台mysql服务器上用ip addr show dev eno16777736命令看一下

wKiom1jnLPWAmum_AAErgsnHOm8188.jpg

wKioL1jnLPiQg3zqAAFep6K1b9E362.jpg

从上面两张图可以看出,即便mysql1的mysql服务和keepalived服务都重新开启了,mysql2仍然是master了,mysql1抢不回去master的权利了,说明我们设置的nopreempt配置生效了,在生产环境中就需要添加不抢占配置,保证了群集稳定性,只有当mysql2的mysql服务坏掉的时候,mysql1才会再次成为master,否则它永远只能当mysql2的备份。(:nopreempt一般是在优先级高的mysql上设置)

13、我们找一台安装有MySQL客户端,然后登录VIP,看是否能登录,在登录之前两台MySQL服务器都要授权允许从远程登录

wKiom1jnLPyR1HyPAAFujBaMMSk453.jpg

在客户端上登陆:

wKioL1jnLQGhXoXFAAIy3pt7jiE132.jpg

上图显示说明在客户端访问VIP地址,由mysql2主机提供响应的,因为mysql2当前是主服务器,将mysql2的mysql服务停止,在客户端执行show  variables like‘server_id’;

wKioL1jnLQOSpPe5AAD_D8pVJ78849.jpg

wKioL1jnLQqA5m4PAAIYqzox4XI257.jpg

上图显示说明在客户端的查询请求是由mysql1主机响应的,故障切换成功。

 

总结:

Keepalived+mysql双主一般来说,中小型规模的时候,采用这种架构是最省事的。

在master节点发生故障后,利用keepalived的高可用机制实现快速切换到备用节点。

在这个方案里,有几个需要注意的地方:

1.采用keepalived作为高可用方案时,两个节点最好都设置成BACKUP模式,避免因为意外情况下(比如脑裂)相互抢占导致往两个节点写入相同数据而引发冲突;

2.把两个节点的auto_increment_increment(自增步长)和auto_increment_offset(自增起始值)设成不同值。其目的是为了避免master节点意外宕机时,可能会有部分binlog未能及时复制到slave上被应用,从而会导致slave新写入数据的自增值和原先master上冲突了,因此一开始就使其错开;当然了,如果有合适的容错机制能解决主从自增ID冲突的话,也可以不这么做;

3.slave节点服务器配置不要太差,否则更容易导致复制延迟。作为热备节点的slave服务器,硬件配置不能低于master节点;

4.如果对延迟问题很敏感的话,可考虑使用MariaDB分支版本,或者直接上线MySQL 5.7最新版本,利用多线程复制的方式可以很大程度降低复制延迟;


本文转自Mr大表哥 博客,原文链接:  http://blog.51cto.com/zpf666/1913822   如需转载请自行联系原作者


相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
1月前
|
Ubuntu 关系型数据库 MySQL
使用Ubuntu和Windows电脑实现Mysql主从同步(详细操作步骤)
使用Ubuntu和Windows电脑实现Mysql主从同步(详细操作步骤)
30 2
|
3月前
|
关系型数据库 MySQL 数据库
深入MySQL数据库进阶实战:性能优化、高可用性与安全性
深入MySQL数据库进阶实战:性能优化、高可用性与安全性
136 0
|
1月前
|
SQL 存储 运维
MySQL高可用性:主从复制和集群
MySQL高可用性:主从复制和集群
36 0
|
3月前
|
安全 关系型数据库 MySQL
linux 安装 mysql步骤
linux 安装 mysql步骤
449 0
|
5月前
|
SQL 关系型数据库 MySQL
MySQL的主从结构是通过一系列的步骤搭建出来的
MySQL的主从结构是通过一系列的步骤搭建出来的
30 1
|
1月前
|
NoSQL 关系型数据库 MySQL
Docker安装详细步骤及相关环境安装配置(mysql、jdk、redis、自己的私有仓库Gitlab 、C和C++环境以及Nginx服务代理)
Docker安装详细步骤及相关环境安装配置(mysql、jdk、redis、自己的私有仓库Gitlab 、C和C++环境以及Nginx服务代理)
221 0
|
1月前
|
关系型数据库 MySQL 数据库
使用 Docker 搭建一个“一主一从”的 MySQL 读写分离集群(超详细步骤
使用 Docker 搭建一个“一主一从”的 MySQL 读写分离集群(超详细步骤
64 0
|
1月前
|
关系型数据库 MySQL Linux
【Linux】在Linux上安装MySQL数据库的步骤
【Linux】在Linux上安装MySQL数据库的步骤
127 0
|
1月前
|
关系型数据库 MySQL Linux
【VMware安装+centos 7Linux系统+MySQL安装】——在Linux系统中安装MySQL步骤,以及遇见的各种问题(如:vm两个虚拟网卡消失、vm网络适配器有感叹号等等)
【VMware安装+centos 7Linux系统+MySQL安装】——在Linux系统中安装MySQL步骤,以及遇见的各种问题(如:vm两个虚拟网卡消失、vm网络适配器有感叹号等等)
186 0
|
2月前
|
存储 关系型数据库 MySQL
学习MySQL的基础学习步骤——纯理论篇,实操前必看
学习MySQL的基础学习步骤——纯理论篇,实操前必看
25 1