redis 数据库主从不一致问题解决方案

 在聊数据库与缓存一致性问题之前,先聊聊数据库主库与从库的一致性问题。

问:常见的数据库集群架构如何?

答:一主多从,主从同步,读写分离。

如上图:

(1)一个主库提供写服务

(2)多个从库提供读服务,可以增加从库提升读性能

(3)主从之间同步数据

画外音:任何方案不要忘了本心,加从库的本心,是提升读性能。

问:为什么会出现不一致?

答:主从同步有时延,这个时延期间读从库,可能读到不一致的数据。

如上图:

(1)服务发起了一个写请求

(2)服务又发起了一个读请求,此时同步未完成,读到一个不一致的脏数据

(3)数据库主从同步最后才完成

画外音:任何数据冗余,必将引发一致性问题。

问:如何避免这种主从延时导致的不一致?

答:常见的方法有这么几种。

方案一:忽略

任何脱离业务的架构设计都是耍流氓,绝大部分业务,例如:百度搜索,淘宝订单,QQ消息,58帖子都允许短时间不一致。

画外音:如果业务能接受,最推崇此法。

如果业务能够接受,别把系统架构搞得太复杂。

方案二:强制读主

如上图:

(1)使用一个高可用主库提供数据库服务

(2)读和写都落到主库上

(3)采用缓存来提升系统读性能

这是很常见的微服务架构,可以避免数据库主从一致性问题。

方案三:选择性读主

强制读主过于粗暴,毕竟只有少量写请求,很短时间,可能读取到脏数据。

有没有可能实现,只有这一段时间,可能读到从库脏数据的读请求读主,平时读从呢?

可以利用一个缓存记录必须读主的数据。

如上图,当写请求发生时:

(1)写主库

(2)将哪个库,哪个表,哪个主键三个信息拼装一个key设置到cache里,这条记录的超时时间,设置为“主从同步时延”

画外音:key的格式为“db:table:PK”,假设主从延时为1s,这个key的cache超时时间也为1s。

如上图,当读请求发生时:

这是要读哪个库,哪个表,哪个主键的数据呢,也将这三个信息拼装一个key,到cache里去查询,如果,

(1)cache里有这个key,说明1s内刚发生过写请求,数据库主从同步可能还没有完成,此时就应该去主库查询

(2)cache里没有这个key,说明最近没有发生过写请求,此时就可以去从库查询

以此,保证读到的一定不是不一致的脏数据。

总结

数据库主库和从库不一致,常见有这么几种优化方案:

(1)业务可以接受,系统不优化

(2)强制读主,高可用主库,用缓存提高读性能

(3)在cache里记录哪些记录发生过写请求,来路由读主还是读从

(0)

相关推荐

  • 每秒100W次的计数,架构原来可以这样设计

    58沈剑 架构师之路 今天和大家聊聊计数系统. 画外音:文章较长,可提前收藏. 计数系统解决什么业务问题? 很多业务都有"计数"需求,以微博为例: 微博首页的个人中心部分,有三个重 ...

  • 【面试热点】如何解决缓存系统的数据不一致问题

    设为"星标",重磅干货,第一时间送达 1缓存系统交互 缓存系统设计是后端开发人员的必备技能,也是实现高并发的重要武器. 对于读多写少的场景,我们通常使用内存型数据库作为缓存,关系型 ...

  • 数据库容灾技术

    数据库容灾技术与数据库的容灾架构紧密相关,在设计数据库容灾技术时,除了要考虑数据库容灾架构还要对数据的备份.恢复.传输等具体操作的实现细节.一套完整的数据库容灾技术既要有采用数据备份保护和恢复数据的功 ...

  • [Redis] 万字长文带你总结Redis,助你面试升级打怪

    文章目录 Redis的介绍.优缺点.使用场景 Linux中的安装 常用命令 Redis各个数据类型及其使用场景 Redis字符串(String) Redis哈希(Hash) Redis列表(List) ...

  • 关于MySQL,这篇都没人赞,太没天理了!

    这是一篇关于MySQL数据库,redo log,LSN,崩溃恢复,在线热备的长文,耐心读完,如果没有收获,可以捶我. 研发的童鞋每次对MySQL库表做重大操作之前,例如: (1)修改表结构: (2)批 ...

  • 数据库主从监控脚本,数据传到influxdb

    #!/bin/bashport=`/usr/sbin/ss -ntlp | grep 3306 | awk '{print $4}' | awk -F":" '{print $2} ...

  • 第75天: Python 操作 Redis 数据库介绍

    Redis 作为常用的 NoSql 数据库,主要用于缓存数据,提高数据读取效率,那在 Python 中应该如果连接和操作 Redis 呢?今天就为大概简单介绍下,在 Python 中操作 Redis ...

  • singleR的7个数据库文件下载失败的解决方案

    祖传的单个10x样本的seurat标准代码 祖传的单个10x样本的seurat标准代码(人和鼠需要区别对待) singleR自带7个数据库文件,需要联网才能下载,其中5个是人类数据,2个是小鼠的数据: ...

  • 收藏:数据库云灾备解决方案

    对于IT而言,容灾就是一个提供能防御各种灾难的计算机信息系统.当政府.企业.商家的核心IT系统在遭受如:火灾.水灾.地震.战争.人为破坏等不可抗拒的灾难和意外时,能够有效保护数据幵及时恢复生产系统的正 ...

  • 搭建 mariadb 数据库主从同步

    一.主(master)数据库配置 1. my.cnf 添加配置 [mariadb]log-binserver_id=1log-basename=master1binlog-format=mixedma ...

  • Redis 的主从同步(复制)

    Redis 的主从同步(复制) Redis 的主从同步(复制) 什么是主从同步(复制) 假设有两个 redis 实例 ⇒ A 和 B B 实例的内容与 A 实例的内容保持同步 那么称 A 实例是主数据 ...

  • 【漏洞预警】天融信关于Redis数据库远程命令执行漏洞的预警

    0x00背景介绍 Redis是一个开源的使用ANSI C语言编写.支持网络.可基于内存亦可持久化的日志型.Key-Value数据库,并提供多种语言的API.作为一个高性能的key-value数据库,R ...

  • 如何保证 Redis 缓存与数据库双写一致性?

    作者:不学无数的程序员 在做系统优化时,想到了将数据进行分级存储的思路.因为在系统中会存在一些数据,有些数据的实时性要求不高,比如一些配置信息. 基本上配置了很久才会变一次.而有一些数据实时性要求非常 ...

  • [第304次听写]咦!主从句时态不一致了是什么情况!?

    我是Wind, 以前是字幕组组长. 我每天早上听写1分钟美剧, 已经坚持10个月了. 你想不想找一种轻松愉快的方式提升自己的英语? 跟我一起每天做听写吧! Wind大长图节选 Hey, you sai ...