成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

消息隊列,聊聊發送消息的四種姿勢!

開發 架構
本文詳細介紹了微服務開發中常用的4種消息發送方式。對于那些對數據一致性要求不高的場景,可以選擇使用進階版的消息發送方式。

微服務開發中經常會使用消息隊列進行跨服務通信。在一個典型場景中,服務A執行一個業務邏輯,需要保存數據庫,然后通知服務B執行相應的業務邏輯。在這種場景下,我們需要考慮如何發送消息。

圖片

1. 基礎版

首先,我們可能會考慮將數據庫操作和消息發送放在同一個事務中,以下是偽代碼示例:

@Transactional  
public void saveWithMessage(BusinessDO businessDO){ 
 String id = IdUtils.nextId();
 businessDO.setId(id);
    xxxRepository.save(businessDO);  
    
    BusinessMessage businessMessage = new BusinessMessage();  
    businessMessage.setKey(id);  
    SendResult send = rocketMQTemplate.syncSend("test-topic", sendMessage);
}

在這段代碼里通過@Transactional注解將數據庫的操作以及發送消息放到一個事務中,如果數據庫的保存或者消息發送失敗,則回滾事務。

乍一看似乎沒什么問題,但稍微推敲一下就會發現此方式有如下兩個缺陷:

1.1 數據不一致

首先最容易想到的是,這種消息發送方式無法保證數據的最終一致性。

這里先讓我來解釋一下基于消息隊列,生產者發送消息到消費者消費消息的過程:

  • 生產者發送消息
  • MQ收到消息并將數據持久化,在存儲中新增一條記錄
  • 返回ACK給生產者
  • MQ 推送消息給對應的消費者,等待消費者返回ACK
  • 如果消費者在指定時間內成功返回ACK,那么MQ則認為消費成功,執行第6步刪除消息,如果MQ在指定時間內沒有收到ACK,則認為消息消費失敗,會重新推送消息,重復執行第4、5、6步操作。
  • 刪除消息。

圖片圖片

好,現在回到上面發送消息的場景,假設數據庫處理成功,消息消費成功,但是MQ由于某些原因處理超時,導致ACK確認失敗,此時整個事務回滾,結果出現數據不一致問題。

這種數據不一致的問題在RPC調用的場景下也經常出現,其根本的原因在于:遠程調用,結果最終可能為成功、失敗、超時;而對于超時的情況,處理方最終的結果可能是成功,也可能是失敗,調用方是無法知曉的。

1.2 事務未提交

其次,使用以上方式還存在另一個問題,即消費者在處理消息時可能讀不到剛剛保存的數據,即消費者消費速度快于事務提交的速度。

舉例:

假設服務B需要通過消息中的數據ID獲取服務A數據庫保存的數據。這種情況下,數據庫操作與消息發送在同一事務中。可能出現服務B在處理消息時,服務A事務還未提交,導致服務B獲取的數據是空數據,無法執行相應業務邏輯。

1.3 適用場景

盡管這種發送方式存在上述兩個問題,但在某些場景下仍然適用。例如,消費者在處理時不依賴生產者的數據,且對數據一致性要求不高,這種情況下消息發送和數據庫保存可以不在同一個事務中。

2. 進階版

為解決事務未提交問題,我們可以確保事務提交后再發送消息。在SpringBoot項目中,有兩種常見解決方案。

2.1 事務同步器

基于事務同步器的方法:

@Transactional  
public void saveWithMessage(BusinessDO businessDO){  
    xxxRepository.save(businessDO);  
    
    TransactionSynchronizationManager.registerSynchronization(new TransactionSynchronization() {  
        @Override  
        public void afterCommit() {  
            BusinessMessage businessMessage = new BusinessMessage();  
            businessMessage.setXXX();  
            rocketMQTemplate.syncSend("test-topic", sendMessage);  
        }  
    });  
}

TransactionSynchronizationManager.registerSynchronization 是 Spring 框架中用于注冊事務同步的方法。通過這個方法,你可以在事務提交、回滾或完成時執行一些額外的邏輯。

在上述代碼中,使用了afterCommit方法,在事務成功提交后執行發送消息操作,確保在數據庫操作成功且事務穩定的情況下發送消息。

2.2 消息監聽器

另一種方法是基于ApplicationEventPublisher,在保存數據庫操作后發布一個事件,并通過@TransactionalEventListener(phase = TransactionPhase.AFTER_COMMIT)注解監聽事件。這樣可以確保消息在數據庫事務提交之后再發送。

@Transactional  
public void saveWithMessage(BusinessDO businessDO){  
    xxxRepository.save(businessDO);  

 eventPublisher.publishEvent(new UserCreatedEvent(registerUser));
}

@TransactionalEventListener(phase = TransactionPhase.AFTER_COMMIT) 
public void handleUserRegisteredEvent(UserCreatedEvent userCreatedEvent) {  
    rocketMQTemplate.syncSend("test-topic", sendMessage);  
}

這里需要說明一下:在默認情況下Spring的事件監聽機制并不是異步的(上次群友弄錯了),而是同步的將代碼進行解耦,@TransactionalEventListener也是通過同步的方式,但是加入了回調的方式來解決,這樣就能夠控制事務進行Commited、Rollback時才進行事件的處理,來達到事務同步的目的。

2.3 適用范圍

通過以上方式,相較于基礎版,可以確保消息在事務提交后發送,解決了消費者讀取空數據的問題。但仍然無法保證數據的一致性,適用于對數據一致性要求不高的場景。

3. 本地消息表+補償重試

如果需要保證最終一致性而非強一致性,可以采用本地消息表+補償重試的方式來發送消息。

這種方式的執行原理如下:

  • 在執行業務操作的同時,在本地消息表中插入一條狀態為待發送的記錄,業務數據的記錄與消息記錄必須在同一個事務中完成,這是此方案的核心原則。由于消息表與業務表在同一個庫中,事務可以通過數據庫來保證。
  • 事務提交后發送消息,如果消息發送成功,則將消息狀態標記為發送成功或刪除消息
  • 在生產者服務中會創建一個定時任務,定時從消息表中檢索待發送的消息重新發送。
  • 對于消費者消費失敗,則依賴MQ本身的重試機制來完成,保證數據的最終一致性。

圖片圖片

核心代碼如下:

@Transactional  
public void saveWithMessage(BusinessDO businessDO){  
    TransactionMessage transactionMessage = new TransactionMessage();  
    transactionMessage.setStaus(MessageStatus.WAITING_SEND);  
    transactionMessage.setMessageKey(businessDO.getId());  
    ...  
  
    xxxRepository.save(businessDO);  
    messageRepository.save(TransactionMessage);  
    TransactionSynchronizationManager.registerSynchronization(new TransactionSynchronization() {  
        @Override  
        public void afterCommit() {  
            messageService.sendMessage(transactionMessage,businessDO);  
        }  
    });  
}  

public void sendMessage(TransactionMessage transactionMessage,BusinessDO businessDO){  
    BusinessMessage businessMessage = new BusinessMessage();  
    businessMessage.setXXX();  
    try{  
        rocketMQTemplate.syncSend("test-topic", sendMessage);  
        transactionMessage.setStatus(MessageStatus.SUCCESS);  
        messageRepository.update(transactionMessage);  
    }catch (Exception e){  
        // 執行失敗的業務邏輯  
    }  
  
}

3.1 問題

雖然這種方式能夠保證消息在事務提交后發送,且能夠保證最終一致性,但仍然存在一些缺陷:

首先,需要額外的消息表,增加了系統復雜度。(針對此問題,我們又可以將該功能單獨提取出來,做成一個消息服務來統一處理,考慮篇幅問題,這里暫不展開。)

其次,通過定時任務輪詢消息表,對于處理成功但ACK超時的數據會重新發送消息,這對下游系統產生了強烈的冪等性保障要求,消費者的處理邏輯必須做好冪等控制。關于冪等的處理方案,我在[[Dailymart17:并發與冪等的實現方案]]一文中有詳細的說明,歡迎翻閱。

4. 基于事務消息發送

目前,RocketMQ是主流MQ中唯一一個支持事務消息的,如果你們項目恰好使用的是RocketMQ,可以采用事務消息來發送。

有關RocketMQ事務消息的詳細信息,可以參考我之前的文章[SpringCloud基于RocketMQ實現分布式事務,這里不再贅述。同時,由于在Dailymart項目中使用的是RocketMQ,也可以參考Dailymart的代碼實現。

小結

本文詳細介紹了微服務開發中常用的4種消息發送方式。對于那些對數據一致性要求不高的場景,可以選擇使用進階版的消息發送方式。而對于需要保證最終一致性的情況,推薦采用事務消息和本地消息表的方式進行消息發送。

責任編輯:武曉燕 來源: JAVA日知錄
相關推薦

2023-12-18 08:36:39

消息隊列微服務開發

2023-11-27 13:42:00

消息隊列RocketMQ

2021-08-10 09:59:15

RabbitMQ消息微服務

2021-08-24 08:01:15

死鎖工具多線編程

2019-11-18 09:58:11

中間件投遞模式

2023-08-26 20:08:15

分庫分表Spring

2024-05-28 08:24:18

2021-04-07 19:34:16

社區買菜團購

2017-10-11 15:08:28

消息隊列常見

2022-05-24 10:43:02

延時消息分布式MQ

2019-05-28 05:07:11

物聯網聯網汽車MQTT

2021-03-19 10:55:06

Eslint代碼前端

2024-11-04 09:39:08

Java?接口Thread?類

2024-03-29 08:33:10

應用場景存儲搜索

2023-09-26 08:20:12

消息隊列RabbitMQ

2019-07-19 07:56:13

消息隊列消息代理消息中間件

2022-12-13 09:19:26

分布式消息隊列

2024-05-29 13:18:12

線程Thread?方式

2021-03-11 06:01:41

Linux消息隊列

2010-07-20 11:03:45

Telnet會話
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 欧美一级全黄 | 国产精品一区在线 | 国产一区二区在线播放 | 刘亦菲国产毛片bd | 丁香综合| 一区二区三区电影在线观看 | 久久小视频| 国产精品一区二区三区久久久 | 欧美精品成人影院 | 免费一级欧美在线观看视频 | 日韩在线观看视频一区 | 99久久精品国产一区二区三区 | 欧美一区二区三区在线看 | 亚洲一区二区欧美 | 欧美一区二区网站 | 国产精品www | 成人二区三区 | 国产精品一区在线观看你懂的 | 91在线视频免费观看 | 国产精品久久久久久久岛一牛影视 | 国产精品一区二区三区久久久 | 亚洲国产精品一区二区久久 | 日本免费一区二区三区四区 | 久久精品久久综合 | 91视频国产精品 | 欧美精品一区二区在线观看 | 天天操夜夜操 | 国产精品乱码一区二区三区 | 一级欧美一级日韩片免费观看 | 欧美精品乱码99久久影院 | 精品国产一区二区三区久久 | 欧美日韩一区在线播放 | 91久久久精品国产一区二区蜜臀 | 国产精品日韩 | 午夜视频一区二区三区 | 浴室洗澡偷拍一区二区 | 黄色av网站免费看 | 男女羞羞视频免费看 | 日韩在线欧美 | 国产玖玖 | 中文字幕乱码一区二区三区 |