您当前的位置:首页 > 电脑百科 > 数据库 > MYSQL

我C,MySQL双主架构,原来能这么玩

时间:2020-07-29 10:18:46  来源:  作者:

经常有朋友问,MySQL双主的一致性问题,今天简单聊一聊。

MySQL为什么要使用双主架构

MySQL最常见的集群架构,是一主多从,主从同步,读写分离的架构。通过这种方式,能够扩充数据库的读性能,保证读库的高可用,但此时写库仍然是单点。

 

为了保证MySQL写库的高可用,可以在一个MySQL数据库集群中可以设置两个主库,并设置双向同步,以冗余写库的方式,来保证写库的高可用

MySQL双主架构,会存在什么问题?

如果MySQL双主架构,同时提供服务,可能会引发数据的一致性问题。因为数据的同步有一个时间差,并发的写入可能导致数据同步失败,引起数据丢失

举个栗子:

我C,MySQL双主架构,原来能这么玩

 

如上图所述,假设主库使用了auto increment来作为自增主键:

(1)两个MySQL主库设置双向同步可以用来保证主库的高可用;

(2)数据库中现存的记录主键是1,2,3;

(3)主库1插入了一条记录,主键为4,并向主库2同步数据;

(4)数据同步成功之前,主库2也插入了一条记录,由于数据还没有同步成功,插入记录生成的主键也为4,并向主库1也同步数据;

(5)主库1和主库2都插入了主键为4的记录,双主同步失败,数据不一致

 

能否在MySQL层面,保证两个主库生成的主键一定不冲突呢?

可以的,只需要为两个主库的自增ID:

(1)设置不同的初始值

(2)设置相同的增长步长

 

我C,MySQL双主架构,原来能这么玩

 

如上图所示:

(1)两个MySQL主库设置双向同步可以用来保证主库的高可用;

(2)库1的自增初始值是1,库2的自增初始值是2,增长步长都为2;

(3)库1中插入数据主键为1/3/5/7,库2中插入数据主键为2/4/6/8,不冲突;

(4)数据双向同步后,两个主库会包含全部数据

我C,MySQL双主架构,原来能这么玩

 

如上图所示,两个主库最终都将包含1/2/3/4/5/6/7/8所有数据,即使有一个主库挂了,另一个主库也能够保证写库的高可用

 

上述方案,依赖与数据库的配置,能不能由应用程序,来保证数据的一致性呢?

答案是肯定的,应用程序使用统一的ID生成器,可以保证ID的生成不冲突。

我C,MySQL双主架构,原来能这么玩

 

如上图所示,调用方插入数据时,带入全局唯一ID,而不依赖于数据库的auto increment,也能解决这个问题。

画外音:如何生成全局唯一趋势递增的ID,不展开。

 

引发不一致的根本原因,是保证高可用的两个主库都对外提供服务,如果只有一个主库对外提供服务,另一个主库平时不提供服务,仅仅在主库挂了的时候提供服务,能否消除上述数据不一致呢?

答案是悲观的,仍然不行。

使用虚IP+keepalived的方式保证数据库主库的高可用,平时只有一台主库提供服务,也可能出现数据不一致。

我C,MySQL双主架构,原来能这么玩

 

如上图所示:

(1)两个MySQL主库设置双向同步可以用来保证主库的高可用;

(2)只有主库1对外提供写入服务;

(3)两个主库设置相同的虚IP,在主库1挂掉或者网络异常的时候,虚IP自动漂移,备用主库顶上,保证主库的高可用;

 

切换过程中,由于虚IP没有变化,所以切换过程对调用方是透明的,但在极限的情况下,仍可能引发数据不一致。

我C,MySQL双主架构,原来能这么玩

 

如上图所示:

(1)两个MySQL主库设置双向同步,可以用来保证主库的高可用,并设置了相同的虚IP;

(2)网络抖动前,主库1对上游提供写入服务,插入了一条记录,主键为4,并向备用主库2同步数据;

(3)突然主库1网络异常,keepalived检测出异常后,实施虚IP漂移,备用主库2开始提供服务

(4)在主键4的数据同步成功之前,主库2插入了一条记录,也生成了主键为4的记录,结果导致数据不一致

 

有没有办法缓解上述问题呢?

虚IP漂移,双主同步延时导致的数据不一致,本质上,需要在双主同步完数据之后,再实施虚IP偏移

使用内网DNS探测,缓解上述问题:

(1)使用内网域名连接数据库,例如:db.kg.org;

(2)主库1和主库2设置双主同步,不使用相同虚IP,而是分别使用ip1和ip2;

(3)一开始db.kg.org指向ip1;

(4)用一个小脚本轮询探测ip1主库的连通性;

(5)当ip1主库发生异常时,脚本delay一个x秒的延时,等待主库2同步完数据之后,再将db.kg.org解析到ip2;

(6)应用程序以内网域名进行重连,即可自动连接到ip2主库,并保证了数据的一致性;

画外音:本质上,这是一个可用性与一致性的折衷。

 

总结

MySQL主库高可用,主库一致性,一些小技巧:

(1)双主同步是一种常见的保证写库高可用的方式;

(2)设置相同步长,不同初始值,可以避免auto increment生成冲突主键;

(3)不依赖数据库,业务调用方自己生成全局唯一ID是一个好方法;

(4)双主保证写库高可用,只有一个写库提供服务,并不能完全保证一致性;

(5)内网DNS探测,可以实现在主库1出现问题后,延时一个时间,再进行主库切换,以保证数据一致性,但牺牲了几秒钟的高可用;

希望大家有收获,谢转。

来源公众号:架构师之路

作者:沈剑



Tags:MySQL 双主架构   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,如有任何标注错误或版权侵犯请与我们联系(Email:2595517585@qq.com),我们将及时更正、删除,谢谢。
▌相关推荐
经常有朋友问,MySQL双主的一致性问题,今天简单聊一聊。MySQL为什么要使用双主架构?MySQL最常见的集群架构,是一主多从,主从同步,读写分离的架构。通过这种方式,能够扩充数据库的读...【详细内容】
2020-07-29  Tags: MySQL 双主架构  点击:(78)  评论:(0)  加入收藏
▌简易百科推荐
作者:雷文霆 爱可生华东交付服务部 DBA 成员,主要负责Mysql故障处理及相关技术支持。爱好看书,电影。座右铭,每一个不曾起舞的日子,都是对生命的辜负。 本文来源:原创投稿 *爱可生...【详细内容】
2021-12-24  爱可生    Tags:MySQL   点击:(6)  评论:(0)  加入收藏
生成间隙(gap)锁、临键(next-key)锁的前提条件 是在 RR 隔离级别下。有关Mysql记录锁、间隙(gap)锁、临键锁(next-key)锁的一些理论知识之前有写过,详细内容可以看这篇文章...【详细内容】
2021-12-14  python数据分析    Tags:MySQL记录锁   点击:(17)  评论:(0)  加入收藏
binlog 基本认识 MySQL的二进制日志可以说是MySQL最重要的日志了,它记录了所有的DDL和DML(除了数据查询语句)语句,以事件形式记录,还包含语句所执行的消耗的时间,MySQL的二...【详细内容】
2021-12-14  linux上的码农    Tags:mysql   点击:(13)  评论:(0)  加入收藏
为查询优化你的查询 大多数的MySQL服务器都开启了查询缓存。这是提高性最有效的方法之一,而且这是被MySQL的数据库引擎处理的。当有很多相同的查询被执行了多次的时候,这些查...【详细内容】
2021-12-09  元宇宙iwemeta    Tags:mysql   点击:(15)  评论:(0)  加入收藏
测试的目的和原因,公司有很多程序员,每个程序员对数据库和表结构都有自己的理解。而且每个程序员的理解往往是以效率考虑。既然都是为了效率考虑,那么我就来测试一下究竟哪种使...【详细内容】
2021-12-08  吴彬的分享    Tags:Mysql数据库   点击:(14)  评论:(0)  加入收藏
当你们考虑项目并发的时候,我在部署环境,当你们在纠结使用ArrayList还是LinkedArrayList的时候,我还是在部署环境。所以啊,技术不止境,我在部环境。今天这篇文章缕一下在同一台服...【详细内容】
2021-12-08  秃头码哥    Tags:MySQL数据库   点击:(16)  评论:(0)  加入收藏
对于数据分析来说,MySQL使用最多的是查询,比如对数据进行排序、分组、去重、汇总及字符串匹配等,如果查询的数据涉及多个表,还需要要对表进行连接,本文就来说说MySQL中常用的查询...【详细内容】
2021-12-06  笨鸟学数据分析    Tags:MySQL   点击:(20)  评论:(0)  加入收藏
在学习SQL语句之前,首先需要区分几个概念,我们常说的数据库是指数据库软件,例如MySQL、Oracle、SQL Server等,而本文提到的数据库是指数据库软件中的一个个用于存储数据的容器。...【详细内容】
2021-11-24  笨鸟学数据分析    Tags:SQL语句   点击:(23)  评论:(0)  加入收藏
概述以前参加过一个库存系统,由于其业务复杂性,搞了很多个应用来支撑。这样的话一份库存数据就有可能同时有多个应用来修改库存数据。比如说,有定时任务域xx.cron,和SystemA域...【详细内容】
2021-11-05  Java云海    Tags:分布式锁   点击:(31)  评论:(0)  加入收藏
MySQL的进阶查询 一、 按关键字排序 使用ORDERBY语句来实现排序排序可针对一个或多个字段ASC:升序,默认排序方式 【升序是从小到大】DESC:降序 【降序是从大到小】ORDER BY的...【详细内容】
2021-11-05  Java热点    Tags:SQL语句   点击:(27)  评论:(0)  加入收藏
最新更新
栏目热门
栏目头条