首页
/
每日頭條
/
圖文
/
rocket mq延遲消息隊列實現原理
rocket mq延遲消息隊列實現原理
更新时间:2025-07-13 14:32:17

有關RocketMQ實現分布式事務的理論知識,下篇也會示例 通過SpringCloud來實例RocketMQ實現分布式事務的項目。

一、舉個分布式事務場景

列子:假設 AB100塊錢,同時它們不是同一個服務商。

目标:就是 A 減100塊錢,B 加100塊錢。

實際情況可能有四種:

1)就是A賬戶減100 (成功),B賬戶加100 (成功)

2)就是A賬戶減100(失敗),B賬戶加100 (失敗)

3)就是A賬戶減100(成功),B賬戶加100 (失敗)

4)就是A賬戶減100 (失敗),B賬戶加100 (成功)

這裡 第1和第2 種情況是能夠保證事務的一緻性的,但是 第3和第4 是無法保證事務的一緻性的。

那我們來看下RocketMQ是如何來保證事務的一緻性的。

二、RocketMQ實現分布式事務原理

RocketMQ雖然之前也支持分布式事務,但并沒有開源,等到RocketMQ 4.3才正式開源。

1、基礎概念

最終一緻性

RocketMQ是一種最終一緻性的分布式事務,就是說它保證的是消息最終一緻性,而不是像2PC、3PC、TCC那樣強一緻分布式事務,至于為什麼說它是最終一緻性事務下面會詳細說明。

Half message(半消息)

是指暫不能被Consumer消費的消息。Producer 已經把消息成功發送到了 Broker 端,但此消息被标記為暫不能投遞狀态,處于該種狀态下的消息稱為半消息。需要 Producer

對消息的二次确認後,Consumer才能去消費它。

消息回查

由于網絡閃段,生産者應用重啟等原因。導緻 Producer 端一直沒有對 Half Message(半消息) 進行 二次确認。這是Brock服務器會定時掃描長期處于半消息的消息,會

主動詢問 Producer端 該消息的最終狀态(Commit或者Rollback),該消息即為 消息回查

2、分布式事務交互流程

理解這張阿裡官方的圖,就能理解RocketMQ分布式事務的原理了。

rocket mq延遲消息隊列實現原理(RocketMQ實現分布式事務原理)1

我們來說明下上面這張圖

1、A服務先發送給Half Message給Brock端,消息中攜帶 B服務 即将要 100元的信息。

2、當A服務知道Half Message發送成功後,那麼開始第3步執行本地事務。

3、執行本地事務(會有三種情況1、執行成功。2、執行失敗。3、網絡等原因導緻沒有響應)

4.1)、如果本地事務成功,那麼Product向Brock服務器發送Commit,這樣B服務就可以消費該message。

4.2)、如果本地事務失敗,那麼Product向Brock服務器發送Rollback,那麼就會直接删除上面這條半消息。

4.3)、如果因為網絡等原因遲遲沒有返回失敗還是成功,那麼會執行RocketMQ的回調接口,來進行事務的回查。

從上面流程可以得知隻有A服務本地事務執行成功 ,B服務才能消費該message。

然後我們再來思考幾個問題?

rocket mq延遲消息隊列實現原理(RocketMQ實現分布式事務原理)2

為什麼要先發送Half Message(半消息)

我覺得主要有兩點

1)可以先确認 Brock服務器是否正常 ,如果半消息都發送失敗了 那說明Brock挂了。

2)可以通過半消息來回查事務,如果半消息發送成功後一直沒有被二次确認,那麼就會回查事務狀态。

什麼情況會回查

也會有兩種情況

1)執行本地事務的時候,由于突然網絡等原因一直沒有返回執行事務的結果(commit或者rollback)導緻最終返回UNKNOW,那麼就會回查。

2) 本地事務執行成功後,返回Commit進行消息二次确認的時候的服務挂了,在重啟服務那麼這個時候在brock端

它還是個Half Message(半消息),這也會回查。

特别注意: 如果回查,那麼一定要先查看當前事務的執行情況,再看是否需要重新執行本地事務。

想象下如果出現第二種情況而引起的回查,如果不先查看當前事務的執行情況,而是直接執行事務,那麼就相當于成功執行了兩個本地事務。

為什麼說MQ是最終一緻性事務

通過上面這幅圖,我們可以看出,在上面舉例事務不一緻的兩種情況中,永遠不會發生

A賬戶減100 (失敗),B賬戶加100 (成功)

因為:如果A服務本地事務都失敗了,那B服務永遠不會執行任何操作,因為消息壓根就不會傳到B服務。

那麼 A賬戶減100 (成功),B賬戶加100 (失敗) 會不會可能存在的。

答案是會的

因為A服務隻負責當我消息執行成功了,保證消息能夠送達到B,至于B服務接到消息後最終執行結果A并不管。

那B服務失敗怎麼辦?

如果B最終執行失敗,幾乎可以斷定就是代碼有問題所以才引起的異常,因為消費端RocketMQ有重試機制,如果不是代碼問題一般重試幾次就能成功。

如果是代碼的原因引起多次重試失敗後,也沒有關系,将該異常記錄下來,由人工處理,人工兜底處理後,就可以讓事務達到最終的一緻性。

最後

不管多忙,每天給自己預留至少半小時的學習時間,拒絕做代碼垃圾的搬運工!

有不對的地方可以在評論區留言,覺得不錯的朋友希望能得到您的轉發支持,同時可以持續關注我,每周定期會分享3到4篇精選幹貨!

,
Comments
Welcome to tft每日頭條 comments! Please keep conversations courteous and on-topic. To fosterproductive and respectful conversations, you may see comments from our Community Managers.
Sign up to post
Sort by
Show More Comments
推荐阅读
索尼psvita能玩什麼遊戲(索尼PSVita終告破解可惜來晚了)
索尼psvita能玩什麼遊戲(索尼PSVita終告破解可惜來晚了)
  據日本媒體報道,索尼PS Vita在5年前正式上市,由于使用了封閉的聯網操作系統和專用的存儲卡,一直以來都是破解方面的老大難。而現在,PS Vita的系統和存儲卡已經被徹底破解。哎!這一等就是五年。      索尼PS Vita終告破解(圖片來自cnbeta)   在前,雖有暫時性的破解方法,使其可以運行PSP遊戲和自制軟件,但每次都是在系統升級後失效。...
2025-07-13
盛夏未來吳磊打碟張子楓後台(早報超有料盛夏未來張子楓吳磊CP感拉滿怒火)
盛夏未來吳磊打碟張子楓後台(早報超有料盛夏未來張子楓吳磊CP感拉滿怒火)
  新鮮資訊morning call 盡在早報超有料   新的一天,朋友們早上好呀。三伏天,伴随着偶爾的晴天與按時報道的暴雨,還是要靠空調才能“續命”。話不多說,說多了都是汗,一起來看看今天的早報吧~      預告搶鮮看丨張子楓吳磊《盛夏未來》曝新海報《怒火·重案》甄子丹謝霆鋒上演厮殺   昨日,由陳正道執導,張子楓、吳磊、郝蕾、祖峰等主演的青春電影《盛夏...
2025-07-13
泡面創始人吳百福的勵志故事(34方便面之父)
泡面創始人吳百福的勵志故事(34方便面之父)
  衆所周知方便面是風靡全球的一種既美味又快捷的速食食品,這種方便食品的發明造福了忙碌的上班族和奔波的旅客們。輕便易攜的重量和僅需要熱水就可以加工的簡單操作,讓這些行色匆匆的人在緊張的工作和疲憊的旅行過程中,能夠吃上一口熱乎的湯面。   享受着方便面帶來的一切便利時,我們都要感謝它的發明者:方便面之父安藤百福。從發明者的名字看來,這是一個日本名字,事實上方便...
2025-07-13
怎麼修改pdf中的文字(怎麼直接修改pdf中的文字)
怎麼修改pdf中的文字(怎麼直接修改pdf中的文字)
  #頭條創作挑戰賽#   市面上各類第三方PDF編輯工具都可以實現pdf中文字的直接修改,小編這裡總結了三種常用且簡單易學的方法分别來實現,一起來學習下吧!   方法一:使用Adobe Acrobat DC打開需要修改文字的pdf文件,單擊右側的“編輯PDF”功能圖标,即可自動将pdf中文字識别為可編輯狀态,直接修改即可。   方法二:使用福昕高級PDF編...
2025-07-13
steam求生之路2能氪金嗎(利益與良知的艱難選擇)
steam求生之路2能氪金嗎(利益與良知的艱難選擇)
  不知道大家還記不記得冒險解謎獨立遊戲《旁觀者》?反烏托邦題材的解謎遊戲,加上無處不在的監視與道德抉擇,選擇當好人自己就要死,當壞人卻又良心上過不去,玩過的小夥伴估計都非常印象深刻。這款備受好評的《旁觀者》官方微博宣布,《旁觀者2(Beholder 2)》的制作已經全面展開,并且遊戲已經在Steam上架,預計2018年發售,移動端也有可能跟上哦~     ...
2025-07-13
Copyright 2023-2025 - www.tftnews.com All Rights Reserved