系列
Topic可以理解為在rocketMq體系當(dāng)中作為一個邏輯消息組織形式,一般情況下一類業(yè)務(wù)消息會申請一個topic來實現(xiàn)業(yè)務(wù)之間隔離。
Topic的存儲
說明:
? ? 該圖分享自:?RocketMQ概念模型
? ? Topic是一個邏輯上的概念,實際上在每個broker上以queue的形式保存,也就是說每個topic在broker上會劃分成幾個邏輯隊列,每個邏輯隊列保存一部分消息數(shù)據(jù),但是保存的消息數(shù)據(jù)實際上不是真正的消息數(shù)據(jù),而是指向commit log的消息索引。
? ? Topic創(chuàng)建的時候可以用集群模式去創(chuàng)建(這樣集群里面每個broker的queue的數(shù)量相同),也可以用單個broker模式去創(chuàng)建(這樣每個broker的queue數(shù)量可以不一致)。
? ? 每個broker上的角色是等同的,也就是說每個broker上面的queue保存了該topic下一部分消息,注意是一部分而不是全量消息。
rocketMq的命令行工具
說明:
????在rocketMq編譯后的bin目錄下有一個mqadmin的工具,該工具作為rocketMq的CLI工具對外提供,使用時候可以通過sh mqadmin -h 或者sh mqadmin command -h查看用法。
????updateTopic和deleteTopic是實際中操作topic的命令。
rocketMq的topic工具
說明:
????創(chuàng)建topic需要指定的參數(shù),
????-b 指定broker上創(chuàng)建topic
????-c 指定cluster創(chuàng)建topic
????-n 指定namesrv地址,cluster模式下必須從namesrv獲取broker地址
????-t topic的名字標(biāo)志
????-r/w 讀寫隊列的個數(shù),建議相等
????-p queue的讀寫權(quán)限
????-o 待研究不確定是不是保證全局有序消息的配置
topic的創(chuàng)建過程
說明:
????topic的創(chuàng)建過程涉及到3個組件,分別是mqadmin、broker、namesrv。
????整個創(chuàng)建過程是mqadmin->broker->namesrv。
????mqadmin通知broker創(chuàng)建topic和對應(yīng)的queue信息。
????broker轉(zhuǎn)發(fā)通知namesrv保存topic和broker的原信息,同時在本地持久化一份topic配置。
? ? broker在這個時候不真正創(chuàng)建本地的隊列信息
mqadmin操作過程
說明:
????參見?UpdateTopicSubCommand類
????注冊參數(shù)和updateTopic顯示幫助是一致的
說明:
? ? 支持cluster模式下創(chuàng)建topic和支持broker模式下創(chuàng)建topic
說明:
? ? 通知broker創(chuàng)建topic。
說明:
? ? 集群模式下首先通過namesrv獲取所有的broker的master地址,然后通知每個broker去創(chuàng)建topic,每個broker的創(chuàng)建過程跟指定單個broker是一致的。
broker操作過程
說明:
????參見AdminBrokerProcessor類
說明:
? ? broker本地通過updateTopicConfig保存topic的配置信息并持久化
? ? broker通過registerBrokerAll通知namesrv保存topic信息
說明:
? ? broker通知namesrv注冊該broker下的topic信息,具體的namesrv地址是在registerBrokerAll內(nèi)部訪問namesrv獲取的。
namesrv操作過程
說明:
? ? 參見DefaultRequestProcessor類
說明:
? ? 參見DefaultRequestProcessor類
說明:
????參見RouteInfoManager類