首页
/
每日頭條
/
圖文
/
rocket mq延遲消息隊列實現原理
rocket mq延遲消息隊列實現原理
更新时间:2025-12-20 03:29:23

有關RocketMQ實現分布式事務的理論知識,下篇也會示例 通過SpringCloud來實例RocketMQ實現分布式事務的項目。

一、舉個分布式事務場景

列子:假設 AB100塊錢,同時它們不是同一個服務商。

目标:就是 A 減100塊錢,B 加100塊錢。

實際情況可能有四種:

1)就是A賬戶減100 (成功),B賬戶加100 (成功)

2)就是A賬戶減100(失敗),B賬戶加100 (失敗)

3)就是A賬戶減100(成功),B賬戶加100 (失敗)

4)就是A賬戶減100 (失敗),B賬戶加100 (成功)

這裡 第1和第2 種情況是能夠保證事務的一緻性的,但是 第3和第4 是無法保證事務的一緻性的。

那我們來看下RocketMQ是如何來保證事務的一緻性的。

二、RocketMQ實現分布式事務原理

RocketMQ雖然之前也支持分布式事務,但并沒有開源,等到RocketMQ 4.3才正式開源。

1、基礎概念

最終一緻性

RocketMQ是一種最終一緻性的分布式事務,就是說它保證的是消息最終一緻性,而不是像2PC、3PC、TCC那樣強一緻分布式事務,至于為什麼說它是最終一緻性事務下面會詳細說明。

Half message(半消息)

是指暫不能被Consumer消費的消息。Producer 已經把消息成功發送到了 Broker 端,但此消息被标記為暫不能投遞狀态,處于該種狀态下的消息稱為半消息。需要 Producer

對消息的二次确認後,Consumer才能去消費它。

消息回查

由于網絡閃段,生産者應用重啟等原因。導緻 Producer 端一直沒有對 Half Message(半消息) 進行 二次确認。這是Brock服務器會定時掃描長期處于半消息的消息,會

主動詢問 Producer端 該消息的最終狀态(Commit或者Rollback),該消息即為 消息回查

2、分布式事務交互流程

理解這張阿裡官方的圖,就能理解RocketMQ分布式事務的原理了。

rocket mq延遲消息隊列實現原理(RocketMQ實現分布式事務原理)1

我們來說明下上面這張圖

1、A服務先發送給Half Message給Brock端,消息中攜帶 B服務 即将要 100元的信息。

2、當A服務知道Half Message發送成功後,那麼開始第3步執行本地事務。

3、執行本地事務(會有三種情況1、執行成功。2、執行失敗。3、網絡等原因導緻沒有響應)

4.1)、如果本地事務成功,那麼Product向Brock服務器發送Commit,這樣B服務就可以消費該message。

4.2)、如果本地事務失敗,那麼Product向Brock服務器發送Rollback,那麼就會直接删除上面這條半消息。

4.3)、如果因為網絡等原因遲遲沒有返回失敗還是成功,那麼會執行RocketMQ的回調接口,來進行事務的回查。

從上面流程可以得知隻有A服務本地事務執行成功 ,B服務才能消費該message。

然後我們再來思考幾個問題?

rocket mq延遲消息隊列實現原理(RocketMQ實現分布式事務原理)2

為什麼要先發送Half Message(半消息)

我覺得主要有兩點

1)可以先确認 Brock服務器是否正常 ,如果半消息都發送失敗了 那說明Brock挂了。

2)可以通過半消息來回查事務,如果半消息發送成功後一直沒有被二次确認,那麼就會回查事務狀态。

什麼情況會回查

也會有兩種情況

1)執行本地事務的時候,由于突然網絡等原因一直沒有返回執行事務的結果(commit或者rollback)導緻最終返回UNKNOW,那麼就會回查。

2) 本地事務執行成功後,返回Commit進行消息二次确認的時候的服務挂了,在重啟服務那麼這個時候在brock端

它還是個Half Message(半消息),這也會回查。

特别注意: 如果回查,那麼一定要先查看當前事務的執行情況,再看是否需要重新執行本地事務。

想象下如果出現第二種情況而引起的回查,如果不先查看當前事務的執行情況,而是直接執行事務,那麼就相當于成功執行了兩個本地事務。

為什麼說MQ是最終一緻性事務

通過上面這幅圖,我們可以看出,在上面舉例事務不一緻的兩種情況中,永遠不會發生

A賬戶減100 (失敗),B賬戶加100 (成功)

因為:如果A服務本地事務都失敗了,那B服務永遠不會執行任何操作,因為消息壓根就不會傳到B服務。

那麼 A賬戶減100 (成功),B賬戶加100 (失敗) 會不會可能存在的。

答案是會的

因為A服務隻負責當我消息執行成功了,保證消息能夠送達到B,至于B服務接到消息後最終執行結果A并不管。

那B服務失敗怎麼辦?

如果B最終執行失敗,幾乎可以斷定就是代碼有問題所以才引起的異常,因為消費端RocketMQ有重試機制,如果不是代碼問題一般重試幾次就能成功。

如果是代碼的原因引起多次重試失敗後,也沒有關系,将該異常記錄下來,由人工處理,人工兜底處理後,就可以讓事務達到最終的一緻性。

最後

不管多忙,每天給自己預留至少半小時的學習時間,拒絕做代碼垃圾的搬運工!

有不對的地方可以在評論區留言,覺得不錯的朋友希望能得到您的轉發支持,同時可以持續關注我,每周定期會分享3到4篇精選幹貨!

,
Comments
Welcome to tft每日頭條 comments! Please keep conversations courteous and on-topic. To fosterproductive and respectful conversations, you may see comments from our Community Managers.
Sign up to post
Sort by
Show More Comments
推荐阅读
心理咨詢師都需要考哪些
心理咨詢師都需要考哪些
心理咨詢師都需要考哪些?随着社會的進步和發展,心理咨詢行業發展迅速,對心理咨詢師的需求越來越大中國有14億人口,近2億有嚴重心理問題的人需要心理治療,至少有130萬人心理咨詢師,而現在中國隻有不到10萬人并且國家要求所有學校、醫院、企事業單...
2025-12-20
孤島危機重制版有誠意嗎
孤島危機重制版有誠意嗎
Crytek剛剛分享了一條推文,明确暗示了《孤島危機2》的重制版也将推出。當然這隻是一個小暗示,去年Crytek的一些内部文件已經洩露了《孤島危機2》和《孤島危機3》的重制版。上圖的這句話出自《孤島危機2》的開頭部分。當然,《孤島危機2》的...
2025-12-20
四川最好的211是哪個
四川最好的211是哪個
提到四川省的大學很多人想到的就是兩所985,一個是川大一個是成電,這兩所985在領域内各有千秋,比如川大因為綜合性強加上學科齊全,在一些國内的榜單中可以被排到了前十的位置。雖然成電沒有川大的專業齊全,但是成電在通訊領域赫赫有名,作為“兩電一...
2025-12-20
神秘古埃及法老
神秘古埃及法老
古埃及文明一直充滿神秘色彩,曼徹斯特博物館曾被曝發生神秘“靈異”現象,一尊古埃及死神納布西努(Neb-Senu)的雕像在沒有外力的作用下,竟然自己發生了180度旋轉。令人不禁再次想起傳說已久的“法老詛咒”。這尊雕像高約25厘米,有1800年...
2025-12-20
全新英菲尼迪fx35價格優惠
全新英菲尼迪fx35價格優惠
豪華品牌SUV不少,強調公路行駛性能的SUV也不少,但是兼具這兩點确實不多。英菲尼迪FX35就是這少數中的一位,強勁的V6引擎、保證舒适駕乘的懸挂系統、時尚的外觀、動感的内飾、豐富的配置,這些都無時無刻不撩撥着消費者的心弦。而2011款的英...
2025-12-20
Copyright 2023-2025 - www.tftnews.com All Rights Reserved