成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

技術派中的緩存一致性解決方案

數據庫 MySQL
這篇文章很基礎,也非常適用,大家可以直接下載技術派項目,里面都有代碼和測試用例,代碼倉庫詳見:https://github.com/itwanger/paicoding

大家好,我是樓仔呀。

之前寫過一篇《高頻面試:如何保障 MySQL 和 Redis 的數據一致性?》,閱讀量直奔 7K,但是里面只有理論,沒有實戰,今天就結合技術派項目,告訴大家如何去實現 MySQL 和 Redis 的一致性。

在講解實戰部分之前,我們還是先回顧一下理論知識,根據網上的眾多解決方案,我們總結出 6 種:

圖片

你可以先想想,技術派會采用哪種方案呢?

理論知識

溫馨提示:如果你對理論知識已經非常清楚,可以直接跳到文章的實戰部分。

不好的方案

1. 先寫 MySQL,再寫 Redis

圖片

圖解說明:

  • 這是一副時序圖,描述請求的先后調用順序;
  • 橘黃色的線是請求 A,黑色的線是請求 B;
  • 橘黃色的文字,是 MySQL 和 Redis 最終不一致的數據;
  • 數據是從 10 更新為 11;
  • 后面所有的圖,都是這個含義,不再贅述。

請求 A、B 都是先寫 MySQL,然后再寫 Redis,在高并發情況下,如果請求 A 在寫 Redis 時卡了一會,請求 B 已經依次完成數據的更新,就會出現圖中的問題。

這個圖已經畫的很清晰了,我就不用再去啰嗦了吧,不過這里有個前提,就是對于讀請求,先去讀 Redis,如果沒有,再去讀 DB,但是讀請求不會再回寫 Redis。 大白話說一下,就是讀請求不會更新 Redis。

2. 先寫 Redis,再寫 MySQL

圖片

同“先寫 MySQL,再寫 Redis”,看圖可秒懂。

3. 先刪除 Redis,再寫 MySQL

這幅圖和上面有些不一樣,前面的請求 A 和 B 都是更新請求,這里的請求 A 是更新請求,但是請求 B 是讀請求,且請求 B 的讀請求會回寫 Redis。

圖片

請求 A 先刪除緩存,可能因為卡頓,數據一直沒有更新到 MySQL,導致兩者數據不一致。

這種情況出現的概率比較大,因為請求 A 更新 MySQL 可能耗時會比較長,而請求 B 的前兩步都是查詢,會非常快。

好的方案

4. 先刪除 Redis,再寫 MySQL,再刪除 Redis

對于“先刪除 Redis,再寫 MySQL”,如果要解決最后的不一致問題,其實再對 Redis 重新刪除即可,這個也是大家常說的“緩存雙刪”。

圖片

為了便于大家看圖,對于藍色的文字,“刪除緩存 10”必須在“回寫緩存10”后面,那如何才能保證一定是在后面呢?網上給出的第一個方案是,讓請求 A 的最后一次刪除,等待 500ms。

對于這種方案,看看就行,反正我是不會用,太 Low 了,風險也不可控。

那有沒有更好的方案呢,我建議異步串行化刪除,即刪除請求入隊列

圖片

異步刪除對線上業務無影響,串行化處理保障并發情況下正確刪除。

如果雙刪失敗怎么辦,網上有給 Redis 加一個緩存過期時間的方案,這個不敢茍同。個人建議整個重試機制,可以借助消息隊列的重試機制,也可以自己整個表,記錄重試次數,方法很多。

簡單小結一下:

  • “緩存雙刪”不要用無腦的 sleep 500 ms;
  • 通過消息隊列的異步&串行,實現最后一次緩存刪除;
  • 緩存刪除失敗,增加重試機制。

5. 先寫 MySQL,再刪除 Redis

圖片

對于上面這種情況,對于第一次查詢,請求 B 查詢的數據是 10,但是 MySQL 的數據是 11,只存在這一次不一致的情況,對于不是強一致性要求的業務,可以容忍。(那什么情況下不能容忍呢,比如秒殺業務、庫存服務等。)

當請求 B 進行第二次查詢時,因為沒有命中 Redis,會重新查一次 DB,然后再回寫到 Reids。

圖片

這里需要滿足 2 個條件:

  • 緩存剛好自動失效;
  • 請求 B 從數據庫查出 10,回寫緩存的耗時,比請求 A 寫數據庫,并且刪除緩存的還長。

對于第二個條件,我們都知道更新 DB 肯定比查詢耗時要長,所以出現這個情況的概率很小,同時滿足上述條件的情況更小。

6. 先寫 MySQL,通過 Binlog,異步更新 Redis

這種方案,主要是監聽 MySQL 的 Binlog,然后通過異步的方式,將數據更新到 Redis,這種方案有個前提,查詢的請求,不會回寫 Redis。

圖片

這個方案,會保證 MySQL 和 Redis 的最終一致性,但是如果中途請求 B 需要查詢數據,如果緩存無數據,就直接查 DB;如果緩存有數據,查詢的數據也會存在不一致的情況。

所以這個方案,是實現最終一致性的終極解決方案,但是不能保證實時性。

幾種方案比較

我們對比上面討論的 6 種方案:

  1. 先寫 Redis,再寫 MySQL
  • 這種方案,我肯定不會用,萬一 DB 掛了,你把數據寫到緩存,DB 無數據,這個是災難性的;
  • 我之前也見同學這么用過,如果寫 DB 失敗,對 Redis 進行逆操作,那如果逆操作失敗呢,是不是還要搞個重試?
  1. 先寫 MySQL,再寫 Redis
  • 對于并發量、一致性要求不高的項目,很多就是這么用的,我之前也經常這么搞,但是不建議這么做;
  • 當 Redis 瞬間不可用的情況,需要報警出來,然后線下處理。
  1. 先刪除 Redis,再寫 MySQL
  • 這種方式,我還真沒用過,直接忽略吧。
  1. 先刪除 Redis,再寫 MySQL,再刪除 Redis
  • 這種方式雖然可行,但是感覺好復雜,還要搞個消息隊列去異步刪除 Redis。
  1. 先寫 MySQL,再刪除 Redis
  • 比較推薦這種方式,刪除 Redis 如果失敗,可以再多重試幾次,否則報警出來;
  • 這個方案,是實時性中最好的方案,在一些高并發場景中,推薦這種。
  1. 先寫 MySQL,通過 Binlog,異步更新 Redis
  • 對于異地容災、數據匯總等,建議會用這種方式,比如 binlog + kafka,數據的一致性也可以達到秒級;
  • 純粹的高并發場景,不建議用這種方案,比如搶購、秒殺等。

個人結論:

  • 實時一致性方案:采用“先寫 MySQL,再刪除 Redis”的策略,這種情況雖然也會存在兩者不一致,但是需要滿足的條件有點苛刻,所以是滿足實時性條件下,能盡量滿足一致性的最優解。
  • 最終一致性方案:采用“先寫 MySQL,通過 Binlog,異步更新 Redis”,可以通過 Binlog,結合消息隊列異步更新 Redis,是最終一致性的最優解。

項目實戰

數據更新

因為項目對實時性要求高,所以采用方案 5,先寫 MySQL,再刪除 Redis 的方式。

下面只是一個示例,我們將文章的標簽放入 MySQL 之后,再刪除 Redis,所有涉及到 DB 更新的操作都需要按照這種方式處理。

這里加了一個事務,如果 Redis 刪除失敗,MySQL 的更新操作也需要回滾,避免查詢時讀取到臟數據。

@Override
@Transactional(rollbackFor = Exception.class)
public void saveTag(TagReq tagReq) {
    TagDO tagDO = ArticleConverter.toDO(tagReq);

    // 先寫 MySQL
    if (NumUtil.nullOrZero(tagReq.getTagId())) {
        tagDao.save(tagDO);
    } else {
        tagDO.setId(tagReq.getTagId());
        tagDao.updateById(tagDO);
    }

    // 再刪除 Redis
    String redisKey = CACHE_TAG_PRE + tagDO.getId();
    RedisClient.del(redisKey);
}

@Override
@Transactional(rollbackFor = Exception.class)
public void deleteTag(Integer tagId) {
    TagDO tagDO = tagDao.getById(tagId);
    if (tagDO != null){
        // 先寫 MySQL
        tagDao.removeById(tagId);

        // 再刪除 Redis
        String redisKey = CACHE_TAG_PRE + tagDO.getId();
        RedisClient.del(redisKey);
    }
}

@Override
public void operateTag(Integer tagId, Integer pushStatus) {
    TagDO tagDO = tagDao.getById(tagId);
    if (tagDO != null){

        // 先寫 MySQL
        tagDO.setStatus(pushStatus);
        tagDao.updateById(tagDO);

        // 再刪除 Redis
        String redisKey = CACHE_TAG_PRE + tagDO.getId();
        RedisClient.del(redisKey);
    }
}

數據獲取

這個也很簡單,先查詢緩存,如果有就直接返回;如果未查詢到,需要先查詢 DB ,再寫入緩存。

我們放入緩存時,加了一個過期時間,用于兜底,萬一兩者不一致,緩存過期后,數據會重新更新到緩存。

@Override
public TagDTO getTagById(Long tagId) {

    String redisKey = CACHE_TAG_PRE + tagId;

    // 先查詢緩存,如果有就直接返回
    String tagInfoStr = RedisClient.getStr(redisKey);
    if (tagInfoStr != null && !tagInfoStr.isEmpty()) {
        return JsonUtil.toObj(tagInfoStr, TagDTO.class);
    }

    // 如果未查詢到,需要先查詢 DB ,再寫入緩存
    TagDTO tagDTO = tagDao.selectById(tagId);
    tagInfoStr = JsonUtil.toStr(tagDTO);
    RedisClient.setStrWithExpire(redisKey, tagInfoStr, CACHE_TAG_EXPRIE_TIME);

    return tagDTO;
}

測試用例

/**
 * @author Louzai
 * @date 2023/5/5
 */
@Slf4j
public class MysqlRedisService extends BasicTest {

    @Autowired
    private TagSettingService tagSettingService;

    @Test
    public void save() {
        TagReq tagReq = new TagReq();
        tagReq.setTag("Java");
        tagReq.setTagId(1L);
        tagSettingService.saveTag(tagReq);
        log.info("save success:{}", tagReq);
    }

    @Test
    public void query() {
        TagDTO tagDTO = tagSettingService.getTagById(1L);
        log.info("query tagInfo:{}", tagDTO);
    }
}

我們看一下 Redis:

127.0.0.1:6379> get pai_cache_tag_pre_1
"{\"tagId\":1,\"tag\":\"Java\",\"status\":1,\"selected\":null}"

以及結果輸出:

圖片

后記

這篇文章很基礎,也非常適用,大家可以直接下載技術派項目,里面都有代碼和測試用例,代碼倉庫詳見:https://github.com/itwanger/paicoding。

后面我會把 RabbitMQ、ES、Nacos、MongoDB 和 prometheus 都集成到技術派項目,不為其它的,存粹為了自娛自樂。

責任編輯:武曉燕 來源: 樓仔
相關推薦

2022-12-14 08:23:30

2021-06-06 12:45:41

分布式CAPBASE

2020-11-02 07:09:24

緩存服務器異構

2010-05-24 11:35:11

WCDMA

2023-06-07 08:10:29

2020-05-12 10:43:22

Redis緩存數據庫

2023-06-29 08:00:59

redis數據MySQL

2020-06-01 22:09:48

緩存緩存同步緩存誤用

2025-02-04 15:48:21

悲觀鎖數據庫應用

2022-09-06 15:30:20

緩存一致性

2017-07-25 14:38:56

數據庫一致性非鎖定讀一致性鎖定讀

2019-09-20 21:50:47

數據庫緩存

2024-12-26 15:01:29

2019-03-27 13:56:39

緩存雪崩穿透

2021-12-01 08:26:27

數據庫緩存技術

2023-11-01 10:11:00

Java分布式

2024-05-28 00:50:00

RedisMySQL緩存

2020-10-26 19:25:23

CPU緩存Cache

2022-03-29 10:39:10

緩存數據庫數據

2024-01-15 10:38:20

多級緩存數據一致性分布式緩存
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 日韩免费福利视频 | 色噜噜亚洲男人的天堂 | www.久久99 | www.久草.com | h片在线看| 欧美午夜精品久久久久久浪潮 | 少妇午夜一级艳片欧美精品 | 国产成人在线视频 | 在线看片网站 | 免费在线观看黄视频 | 18性欧美 | 国产精品久久久久久久久久免费看 | 91精品国产综合久久久久久漫画 | 天堂在线91| 国产精品久久久免费 | 蜜桃视频在线观看免费视频网站www | 精品久久99| a免费视频 | 国产高清自拍视频在线观看 | 午夜爱爱毛片xxxx视频免费看 | 久久久亚洲 | 成人午夜影院 | 国产成人精品一区二区三区四区 | 亚洲激情专区 | 在线观看中文字幕一区二区 | 国产一区三区视频 | 欧美精品第一页 | 国产精品日韩欧美一区二区三区 | 国产精品久久久久久久久久久久午夜片 | 在线观看亚洲一区二区 | 逼逼网| 国产精品污www一区二区三区 | 在线看片网站 | 欧美黑人体内she精在线观看 | 国产高清免费 | 久久最新| 国产精品久久久久久久久久免费看 | 狠狠综合久久av一区二区老牛 | 亚洲精品字幕 | 日本高清视频在线播放 | 亚洲国产精品一区二区第一页 |