面试官,别再问我MySQL和redis数据一致性问题了

缓存与数据库

缓存是一种提高系统读性能的常见技术,对于读多写少的应用场景,我们经常使用缓存来进行优化。
例如对于用户的余额信息表 account(uid, money),业务上的需求是:

  1. 查询用户的余额,SELECT money FROM account WHERE uid=XXX,占 99% 的请求
  • 更改用户余额,UPDATE account SET money=XXX WHERE uid=XXX,占 1% 的请求

由于大部分的请求是查询,我们在缓存中建立 uidmoney 的键值对(uid -> money),能够极大降低数据库的压力。

读操作流程:

  1. 读取缓存中是否有相关数据,uid -> money
  • 如果缓存中有相关数据 money,则返回【数据命中 hit】
  • 如果缓存中没有相关数据 money,则从数据库读取相关数据 *money【数据未命中 miss】,放入缓存中 uid -> money,再返回
    缓存的命中率 = 命中缓存请求个数/总缓存访问请求个数 = *hit / (hit + miss)

问题来了:
当余额数据 money 发生变化的时候:

  1. 是更新缓存中的数据,还是淘汰缓存中的数据呢?
  • 是先操纵数据库中的数据再操纵缓存中的数据,还是先操纵缓存中的数据再操纵数据库中的数据呢?
  • 缓存与数据库的操作,在架构上是否有优化的空间呢?

是更新缓存中的数据,还是淘汰缓存中的数据呢?

更新缓存

  • 数据不但写入数据库,还会写入缓存
  • 优点:缓存不会增加一次 cache miss,命中率高

淘汰缓存

  • 数据只会写入数据库,不会写入缓存,只会把数据淘汰掉
  • 优点:简单
  • 缺点:增加了一次 cache miss

取决于 更新缓存的复杂度
例如,上述场景,只是简单的把余额 money 设置成一个值,那么:

  1. 淘汰缓存的操作为 deleteCache(uid)
  • 更新缓存的操作为 setCache(uid, money)

更新缓存的代价很小,此时我们应该更倾向于更新缓存,以保证更高的缓存命中率。

如果余额是通过很复杂的数据计算得出来的,例如业务上除了账户表 account,还有商品表 *product,折扣表 discount
业务场景是用户买了一个商品 product,这个商品的价格是 price,这个商品从属于 *type
类商品,type类商品在做促销活动要打折扣 zhekou,购买了商品过后,这个余额的计算就复杂了,需要:

  1. 先把商品的品类,价格取出来:SELECT type, price FROM product WHERE pid=XXX
  • 再把这个品类的折扣取出来:SELECT zhekou FROM discount WHERE type=XXX
  • 再把原有余额从缓存中查询出来 money = getCache(uid)
  • 再把新的余额写入到缓存中去 setCache(uid, money - price \ zhekou)*

更新缓存的代价很大,此时我们应该更倾向于淘汰缓存

先操作数据库 VS 先操作缓存

当写操作发生时,假设 淘汰缓存 作为对缓存通用的处理方式,又面临两种抉择:

  1. 先写数据库,再淘汰缓存
  • 先淘汰缓存,再写数据库

对于一个不能保证事务性的操作,一定涉及 哪个任务先做,哪个任务后做 的问题,解决这个问题的方向是:
如果出现不一致,谁先做对业务的影响较小,就谁先执行。

假设先写数据库,再淘汰缓存:

  1. 更新数据库操作成功,将编号 001 的账号的余额从 50 元更新为 100 元
  • 可是淘汰缓存操作失败,缓存中是旧数据 50 元,从而造成了 数据不一致,用户查询时,在缓存中命中,返回 50 块的错误余额

结论是:应该先淘汰缓存,再写数据库
这样即使第二步写数据库失败,则只会引发一次 cache miss

缓存架构优化

传统架构:如下所示。缺点:业务方需要同时关注缓存与 数据库。

传统架构

主流优化方案是 服务化:加入一个服务层,向上游提供数据访问接口,向上游屏蔽底层数据存储的细节,这样业务线不需要关注数据是来自于缓存还是数据库。

服务化架构

#面试#
全部评论
图配的是非常好,一下子就明白了
点赞 回复 分享
发布于 2022-09-13 15:10 陕西

相关推荐

头像
10-13 18:10
已编辑
东南大学 C++
。收拾收拾心情下一家吧————————————————10.12更新上面不知道怎么的,每次在手机上编辑都会只有最后一行才会显示。原本不想写凉经的,太伤感情了,但过了一天想了想,凉经的拿起来好好整理,就像象棋一样,你进步最快的时候不是你赢棋的时候,而是在输棋的时候。那废话不多说,就做个复盘吧。一面:1,经典自我介绍2,项目盘问,没啥好说的,感觉问的不是很多3,八股问的比较奇怪,他会深挖性地问一些,比如,我知道MMU,那你知不知道QMMU(记得是这个,总之就是MMU前面加一个字母)4,知不知道slab内存分配器->这个我清楚5,知不知道排序算法,排序算法一般怎么用6,写一道力扣的,最长回文子串反问:1,工作内容2,工作强度3,关于友商的问题->后面这个问题问HR去了,和中兴有关,数通这个行业和友商相关的不要提,这个行业和别的行业不同,别的行业干同一行的都是竞争关系,数通这个行业的不同企业的关系比较微妙。特别细节的问题我确实不知道,但一面没挂我。接下来是我被挂的二面,先说说我挂在哪里,技术性问题我应该没啥问题,主要是一些解决问题思路上的回答,一方面是这方面我准备的不多,另一方面是这个面试写的是“专业面试二面”,但是感觉问的问题都是一些主管面/综合面才会问的问题,就是不问技术问方法论。我以前形成的思维定式就是专业面会就是会,不会就直说不会,但事实上如果问到方法论性质的问题的话得扯一下皮,不能按照上面这个模式。刚到位置上就看到面试官叹了一口气,有一些不详的预感。我是下午1点45左右面的。1,经典自我介绍2,你是怎么完成这个项目的,分成几个步骤。我大致说了一下。你有没有觉得你的步骤里面缺了一些什么,(这里已经在引导我往他想的那个方向走了),比如你一个人的能力永远是不够的,,,我们平时会有一些组内的会议来沟通我们的所思所想。。。。3,你在项目中遇到的最困难的地方在什么方面4,说一下你知道的TCP/IP协议网络模型中的网络层有关的协议......5,接着4问,你觉得现在的socket有什么样的缺点,有什么样的优化方向?6,中间手撕了一道很简单的快慢指针的问题。大概是在链表的倒数第N个位置插入一个节点。————————————————————————————————————10.13晚更新补充一下一面说的一些奇怪的概念:1,提到了RPC2,提到了fu(第四声)拷贝,我当时说我只知道零拷贝,知道mmap,然后他说mmap是其中的一种方式,然后他问我知不知道DPDK,我说不知道,他说这个是一个高性能的拷贝方式3,MMU这个前面加了一个什么字母我这里没记,别问我了4,后面还提到了LTU,VFIO,孩子真的不会。
走呀走:华子二面可能会有场景题的,是有些开放性的问题了
点赞 评论 收藏
分享
评论
4
32
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务