高并发场景--缓存与数据库数据一致性解决方案

朴灿烈づ我的快乐病毒、 2022-11-01 04:27 207阅读 0赞

## **一、业务背景** ##

在高并发的业务场景下，数据库是相对薄弱的环节，通常用户请求先访问到redis。

![c5dc07c4fc6c6094b77db1b6d9cd94fa.png][]

### 业务场景1：从Redis缓存读数据 ###

![d416520b3266d36ff28bfc7b0fba40f2.png][]

### 业务场景2：数据库和缓存更新 ###

一般设计数据库和缓存更新，就容易出现**缓存(Redis)和数据库（MySQL）间的数据一致性问题**。不管是先写数据库，再删除缓存；还是反过来，都可能出现数据不一致。

举个例子：

1.如果删除了缓存Redis，还没有来得及写库MySQL，另一个线程就来读取，发现缓存为空，则去数据库中读取数据写入缓存，此时缓存中为脏数据。

2.如果先写了库，在删除缓存前，写库的线程宕机了，没有删除掉缓存，则也会出现数据不一致情况。

因为写和读是并发的，没法保证顺序，就会出现缓存和数据库的数据不一致。如来解决？这里有两个解决方案，结合业务和技术代价选择使用。

## 二、缓存和数据库一致性解决方案 ##

### **1.第一种方案：采用延时双删策略** ###

在写库前后都进行redis.del(key)操作，并且设定合理的超时时间。

伪代码如下

> public void write(String key,Object data)\{
> 
>     redis.delKey(key);
> 
>     db.updateData(data);
> 
>     Thread.sleep(500);
> 
>     redis.delKey(key);
> 
> \}

**2.具体的步骤就是：**

1）先删除缓存

2）再写数据库

3）休眠500毫秒

4）再次删除缓存

**那么，这个500毫秒怎么确定的，具体该休眠多久呢？**

需要评估自己的项目的读数据业务逻辑的耗时。这么做的目的，就是确保读请求结束，写请求可以删除读请求造成的缓存脏数据。

当然这种策略还要考虑redis和数据库主从同步的耗时。最后的的写数据的休眠时间：则在读数据业务逻辑的耗时基础上，加几百ms即可。比如：休眠1秒。

**3.设置缓存过期时间**

从理论上来说，给缓存设置过期时间，是保证最终一致性的解决方案。所有的写操作以数据库为准，只要到达缓存过期时间，则后面的读请求自然会从数据库中读取新值然后回填缓存。

**4.该方案的弊端**

结合双删策略+缓存超时设置，这样最差的情况就是在超时时间内数据存在不一致，而且又增加了写请求的耗时。并且随着业务量增加，无法准备预估休眠的时间。

### **2、第二种方案：异步更新缓存(基于订阅binlog的同步机制)** ###

**1.技术整体思路：**

MySQL binlog增量订阅消费+消息队列+增量数据更新到redis

**1）读Redis**：热数据基本都在Redis

**2）写MySQL**:增删改都是操作MySQL

**3）更新Redis数据**：MySQ的数据操作binlog，来更新到Redis

**2.Redis更新**

**1）数据操作主要分为两大块：**

一个是全量(将全部数据一次写入到redis)

一个是增量（实时更新）

这里说的是增量,指的是mysql的update、insert、delate变更数据。

**2）读取binlog后分析 ，利用消息队列,推送更新各台的redis缓存数据。**

这样一旦MySQL中产生了新的写入、更新、删除等操作，就可以把binlog相关的消息推送至Redis，Redis再根据binlog中的记录，对Redis进行更新。

其实这种机制，很类似MySQL的主从备份机制，因为MySQL的主备也是通过binlog来实现的数据一致性。

这里可以结合使用canal(阿里的一款开源框架)，通过该框架可以对MySQL的binlog进行订阅，而canal正是模仿了mysql的slave数据库的备份请求，使得Redis的数据更新达到了相同的效果。

当然，这里的消息推送工具你也可以采用别的第三方：kafka、rabbitMQ等来实现推送更新Redis。

[c5dc07c4fc6c6094b77db1b6d9cd94fa.png]: /images/20221024/6cbb656be59f426c93e8069324d7cf93.png
[d416520b3266d36ff28bfc7b0fba40f2.png]: /images/20221024/8e2dd7137a784dc1b21b3d9e88908cb9.png

发表评论取消回复

表情：

评论列表（有 0 条评论，207人围观）

还没有评论，来说两句吧...

相关阅读

相关 MySQL数据一致性问题：场景与解决方案

在MySQL中，数据一致性是一个关键问题，主要涉及到以下几种常见的场景： 1. **事务提交失败**：如果一个事务中的某个操作失败，可能导致其他依赖该结果的事务数据不一致。

拼搏现实的明天。/ 2025年02月09日 18:00/ 0 赞/ 20 阅读

相关解决Java高并发场景下数据一致性问题

在Java高并发场景下，数据一致性问题通常会遇到以下几种情况： 1. **多线程更新同一数据**：多个线程同时操作一个对象，可能会导致数据不一致。 2. **数据库事务处理

古城微笑少年丶/ 2024年10月14日 08:51/ 0 赞/ 107 阅读

相关数据库与缓存一致性方案分享

数据库与缓存一致性方案

￡神魔★判官ぃ/ 2024年05月06日 09:41/ 0 赞/ 114 阅读

相关 redis实战-缓存数据&解决缓存与数据库数据一致性

缓存的定义缓存(Cache),就是数据交换的缓冲区,俗称的缓存就是缓冲区内的数据,一般从数据库中获取,存储于本地代码。防止过高的数据访问猛冲系统,导致其操作线程无法及时

古城微笑少年丶/ 2023年10月14日 23:06/ 0 赞/ 200 阅读

相关数据库与缓存数据一致性解决方案

一、序言在分布式并发系统中，数据库与缓存数据一致性是一项富有挑战性的技术难点。本文将讨论数据库与缓存数据一致性问题，并提供通用的解决方案。假设有完善的工业级分布式事

╰半夏微凉°/ 2023年09月30日 11:36/ 0 赞/ 57 阅读

相关 Redis缓存与数据库一致性解决方案

背景缓存是数据库的副本，应用在查询数据时，先从缓存中查询，如果命中直接返回，如果未命中，去数据库查询最新数据并返回，同时写入缓存。缓存能够有效地加速应用的读写速度，

向右看齐/ 2023年06月14日 04:10/ 0 赞/ 5 阅读

相关高并发下如何保证缓存和数据库的数据一致性？

51CTO 缓存由于其高性能，支持高并发的特性，在高并发的项目中不可或缺。被大家广泛使用的有Redis，Memcached等。本文主要探讨几种常见的缓存的读写模式，以及如

不念不忘少年蓝@/ 2023年02月17日 01:15/ 0 赞/ 96 阅读

相关高并发场景--缓存与数据库数据一致性解决方案

一、业务背景在高并发的业务场景下，数据库是相对薄弱的环节，通常用户请求先访问到redis。 ![c5dc07c4fc6c6094b77db1b6d9cd94fa

朴灿烈づ我的快乐病毒、/ 2022年11月01日 04:27/ 0 赞/ 208 阅读

相关 Redis--保证缓存与数据库的一致性--解决方案

原文网址：[Redis--保证缓存与数据库的一致性--解决方案\_IT利刃出鞘的博客-CSDN博客][Redis--_--_IT_-CSDN] 简介本文介绍如何保证R

￡神魔★判官ぃ/ 2022年08月28日 09:49/ 0 赞/ 266 阅读

相关分布式缓存——缓存与数据库数据一致性

先mark： [https://www.cnblogs.com/yanglang/p/9098661.html][https_www.cnblogs.com_yanglan

超、凢脫俗/ 2022年01月27日 01:04/ 0 赞/ 369 阅读