网易首页 > 网易号 > 正文 申请入驻

MySQL 与 Redis 如何实现最终一致性的四种方案?

0
分享至

背景

缓存是软件开发中一个非常有用的概念,数据库缓存更是在项目中必然会遇到的场景。而缓存一致性的保证,更是在面试中被反复问到,这里进行一下总结,针对不同的要求,选择恰到好处的一致性方案。

缓存是什么

存储的速度是有区别的。缓存就是把低速存储的结果,临时保存在高速存储的技术。

如图所示,金字塔更上面的存储,可以作为下面存储的缓存。

我们本次的讨论,主要针对数据库缓存场景,将以redis作为mysql的缓存为案例来进行。

为什么需要缓存

存储如mysql通常支持完整的ACID特性,因为可靠性,持久性等因素,性能普遍不高,高并发的查询会给mysql带来压力,造成数据库系统的不稳定。同时也容易产生延迟。根据局部性原理,80%请求会落到20%的热点数据上,在读多写少场景,增加一层缓存非常有助提升系统吞吐量和健壮性。

存在问题

存储的数据随着时间可能会发生变化,而缓存中的数据就会不一致。具体能容忍的不一致时间,需要具体业务具体分析,但是通常的业务,都需要做到最终一致。

redis作为mysql缓存

通常的开发模式中,都会使用mysql作为存储,而redis作为缓存,加速和保护mysql。但是,当mysql数据更新之后,redis怎么保持同步呢。

强一致性同步成本太高,如果追求强一致,那么没必要用缓存了,直接用mysql即可。通常考虑的,都是最终一致性。面试宝典:https://www.yoodb.com

解决方案方案一

通过key的过期时间,mysql更新时,redis不更新。这种方式实现简单,但不一致的时间会很长。如果读请求非常频繁,且过期时间比较长,则会产生很多长期的脏数据。

优点:

  • 开发成本低,易于实现;

  • 管理成本低,出问题的概率会比较小。

不足

  • 完全依赖过期时间,时间太短容易缓存频繁失效,太长容易有长时间更新延迟(不一致)

方案二

在方案一的基础上扩展,通过key的过期时间兜底,并且,在更新mysql时,同时更新redis。

优点

  • 相对方案一,更新延迟更小。

不足

  • 如果更新mysql成功,更新redis却失败,就退化到了方案一;

  • 在高并发场景,业务server需要和mysql,redis同时进行连接。

    这样是损耗双倍的连接资源,容易造成连接数过多的问题。

方案三

针对方案二的同步写redis进行优化,增加消息队列,将redis更新操作交给kafka,由消息队列保证可靠性,再搭建一个消费服务,来异步更新redis。

优点

  • 消息队列可以用一个句柄,很多消息队列客户端还支持本地缓存发送,有效解决了方案二连接数过多的问题;

  • 使用消息队列,实现了逻辑上的解耦;

  • 消息队列本身具有可靠性,通过手动提交等手段,可以至少一次消费到redis。

不足

  • 依旧解决不了时序性问题,如果多台业务服务器分别处理针对同一行数据的两条请求,举个栗子,a = 1;

    a = 5;,如果mysql中是第一条先执行,而进入kafka的顺序是第二条先执行,那么数据就会产生不一致。

  • 引入了消息队列,同时要增加服务消费消息,成本较高。

方案四

通过订阅binlog来更新redis,把我们搭建的消费服务,作为mysql的一个slave,订阅binlog,解析出更新内容,再更新到redis。

优点

  • 在mysql压力不大情况下,延迟较低;

  • 和业务完全解耦;

  • 解决了时序性问题。

缺点

  • 要单独搭建一个同步服务,并且引入binlog同步机制,成本较大。

总结方案选型
  1. 首先确认产品上对延迟性的要求,如果要求极高,且数据有可能变化,别用缓存。

  2. 通常来说,方案1就够了,笔者咨询过4,5个团队,基本都是用方案1,因为能用缓存方案,通常是读多写少场景,同时业务上对延迟具有一定的包容性。

    方案1没有开发成本,其实比较实用。

  3. 如果想增加更新时的即时性,就选择方案2,不过没必要做重试保证之类的。

  4. 方案3,方案4针对于对延时要求比较高业务,一个是推模式,一个是拉模式,而方案4具备更强的可靠性,既然都愿意花功夫做处理消息的逻辑,不如一步到位,用方案4。

结论

一般情况,方案1够用。若延时要求高,直接选择方案4。如果是面试场景,从简单讲到复杂,面试官会一步一步追问,咱们就一点点推导,宾主尽欢。

作者:牛牛码特 juejin.cn/post/6844903929281511438

公众号“Java精选”所发表内容注明来源的,版权归原出处所有(无法查证版权的或者未注明出处的均来自网络,系转载,转载的目的在于传递更多信息,版权属于原作者。如有侵权,请联系,笔者会第一时间删除处理!

最近有很多人问,有没有读者交流群!加入方式很简单,公众号Java精选,回复“加群”,即可入群!

(微信小程序):3000+道面试题,包含Java基础、并发、JVM、线程、MQ系列、Redis、Spring系列、Elasticsearch、Docker、K8s、Flink、Spark、架构设计等,在线随时刷题!

------ 特别推荐 ------

特别推荐:专注分享最前沿的技术与资讯,为弯道超车做好准备及各种开源项目与高效率软件的公众号,「大咖笔记」,专注挖掘好东西,非常值得大家关注。点击下方公众号卡片关注

文章有帮助的话,点在看,转发吧!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
龚翔宇比赛中痛哭!王媛媛李盈莹动作暖心,蔡斌一举动再惹争议

龚翔宇比赛中痛哭!王媛媛李盈莹动作暖心,蔡斌一举动再惹争议

体坛春秋
2024-06-16 22:05:16
南方医科大回应:正核实情况。知情人透露:留学生举报没那么简单

南方医科大回应:正核实情况。知情人透露:留学生举报没那么简单

户外阿毽
2024-06-16 17:38:42
55年授衔,陈赓彭德怀爆发争吵,彭德怀怒言:陈赓,我是国防部长

55年授衔,陈赓彭德怀爆发争吵,彭德怀怒言:陈赓,我是国防部长

李律讲法
2024-06-16 20:05:02
匈牙利不反对涉及乌克兰一切决定,包括启动入盟谈判,转变很意外

匈牙利不反对涉及乌克兰一切决定,包括启动入盟谈判,转变很意外

山河路口
2024-06-15 23:24:13
网红郭有才转室内直播!1.7亿点赞,3077万观看,礼物刷屏

网红郭有才转室内直播!1.7亿点赞,3077万观看,礼物刷屏

综艺拼盘汇
2024-06-16 17:16:55
持仓40万股,人都亏傻了!如果星期一继续跌停,就注定退市

持仓40万股,人都亏傻了!如果星期一继续跌停,就注定退市

惜别的海岸
2024-06-16 15:25:57
普京停火新条件;G7公报涉华言论;越南高层受处分;智利申请加入RCEP | 6月17日要闻日报

普京停火新条件;G7公报涉华言论;越南高层受处分;智利申请加入RCEP | 6月17日要闻日报

今日时事要闻
2024-06-17 01:10:21
“将完全退出集安组织,不再回来”!

“将完全退出集安组织,不再回来”!

占豪
2024-06-14 01:06:17
长得“歪瓜裂枣”,整得“美若天仙”,这7位女星都靠脸逆天改命

长得“歪瓜裂枣”,整得“美若天仙”,这7位女星都靠脸逆天改命

梦录的西方史话V
2024-06-08 08:42:43
iPhone 16 取消所有实体按键,实锤了!

iPhone 16 取消所有实体按键,实锤了!

最潮家居评
2024-06-14 21:13:34
重庆楼市全军覆没,重庆房价跌破10000元,重庆楼市6月分析

重庆楼市全军覆没,重庆房价跌破10000元,重庆楼市6月分析

有事问彭叔
2024-06-15 12:19:40
问界就山西运城M7事故中相关技术问题发布说明

问界就山西运城M7事故中相关技术问题发布说明

界面新闻
2024-05-06 15:01:55
魔术有能力给克莱提供3年8190万的合同 预计要高于勇士的报价

魔术有能力给克莱提供3年8190万的合同 预计要高于勇士的报价

直播吧
2024-06-16 17:43:06
出线仅一周!国足塞翁失马,上上签诞生,4鱼腩同组,直通世界杯

出线仅一周!国足塞翁失马,上上签诞生,4鱼腩同组,直通世界杯

小马哥谈体育
2024-06-17 00:55:26
前曼联门将:耐克有个秘密网站,球员可以上去随便买东西

前曼联门将:耐克有个秘密网站,球员可以上去随便买东西

直播吧
2024-06-16 12:26:08
你知道为什么说“女性的私处”比马桶还要“脏”吗?

你知道为什么说“女性的私处”比马桶还要“脏”吗?

水白头
2024-06-15 11:07:02
她曾是安徽省省长,后出任全国政协副主席,如今70岁仍在奋斗!

她曾是安徽省省长,后出任全国政协副主席,如今70岁仍在奋斗!

历史龙元阁
2024-06-16 15:35:31
6月14日俄乌:33年来最强有力的协议签署,乌克兰艰难时期已过

6月14日俄乌:33年来最强有力的协议签署,乌克兰艰难时期已过

山河路口
2024-06-14 14:05:47
欧洲杯动人1幕:1-3落败,全队站直,抚胸高歌!球迷起立对唱

欧洲杯动人1幕:1-3落败,全队站直,抚胸高歌!球迷起立对唱

叶青足球世界
2024-06-15 23:50:43
莫文蔚属于“诈骗”级别了吧

莫文蔚属于“诈骗”级别了吧

悠闲葡萄
2024-06-16 09:25:18
2024-06-17 02:22:44
Java精选
Java精选
一场永远也演不完的戏
1551文章数 3855关注度
往期回顾 全部

科技要闻

iPhone 16会杀死大模型APP吗?

头条要闻

南方医院回应教师因救人迟到:教学差错是最轻档处理

头条要闻

南方医院回应教师因救人迟到:教学差错是最轻档处理

体育要闻

没人永远年轻 但青春如此无敌还是离谱了些

娱乐要闻

上影节红毯:倪妮好松弛,娜扎吸睛

财经要闻

打断妻子多根肋骨 上市公司创始人被公诉

汽车要闻

售17.68万-21.68万元 极狐阿尔法S5正式上市

态度原创

本地
教育
数码
游戏
军事航空

本地新闻

粽情一夏|海河龙舟赛,竟然成了外国人的大party!

教育要闻

大家都知道,这题目不会特别容易,看来还得是稳打稳的刷题才行啊

数码要闻

PCIe 5.0 SSD终于要便宜了!群联E31T主控无缓存能跑12GB/s

梦幻西游玩家炸出160愤怒水清腰带,西栅为服战连夜换“网吧”?

军事要闻

以军宣布在加沙南部实行"战术暂停"

无障碍浏览 进入关怀版