公司很多業(yè)務在使用RocketMQ,前期業(yè)務量小,沒啥問題,也沒有太關注集群的可用性這塊,所以全公司的業(yè)務公用一個集群,隨之公司的業(yè)務量增加,業(yè)務對RocketMQ集群依賴越來越重,開始思考集群拆分,風險分攤;開始想的是按部門劃分,一個部門一個集群,但是部門之間有通過RocketMQ做數(shù)據(jù)交互的需求,這樣會帶來的問題是一個應用需要連接兩個RocketMQ集群,需要業(yè)務方改代碼,在開發(fā)人不需要改代碼的情況下,如何能做到集群無單點、風險分攤,集群未來可以水平擴容呢,我們的方案如下:

整個集群分三層,分別是應用接入層、Nameserver集群和Broker集群,下面分別對這三部分說明:
接入層其實就是應用連接MQ集群的地址,目前生產環(huán)境我們是直接連接了nameserver的IP地址,如果nameserver擴容或者換服務器了,大家需要修改配置重啟服務更新新的nameserver地址,雖然這個事情的幾率比較低,但是如果發(fā)生了還是比較麻煩,所有我們新的接入方案是負載均衡+域名,大家在程序里面配置連接MQ的地址為:BLB:9876,nameserver1.chj.cloud:9876,nameserver2.chj.cloud:9876,這樣同時做了負載均衡和域名的雙保險,如果負載均衡器故障,應用會重試去連域名
Nameserver本身是無狀態(tài)的,并且基本沒有壓力,所以我們計劃前期先部署兩臺;后續(xù)需要擴容的時候,需要依次重啟broker,讓broker也注冊到新的nameserver上
Broker負責消息的存儲,Broker的部署有多種模式,我們會根據(jù)業(yè)務需求,部署兩種架構:多master多slave(同步復制、同步刷盤)、多master多slave(異步復制、異步刷盤);集群也可以橫向擴容
Broker命名規(guī)范:奇數(shù)為異步復制+異步刷盤類型,偶數(shù)為同步復制+同步刷盤類型,如:broker-1,broker-2

根據(jù)業(yè)務場景,我們把Topic創(chuàng)建到不同的Broker集群上,業(yè)務場景分兩種情況:一種是需要保證消息不丟,但是對吞吐量要求不高,如訂單相關信息,比如下圖的TopicA就是用來存儲訂單相關的Topic,那么我們就把這個Topic創(chuàng)建到同步復制、同步刷盤這樣角色的Broker集群上;另一種是對吞吐量要求特別高,但是消息容許發(fā)生少量丟失,如車輛上報的監(jiān)控相關信息,比如下圖的TopicB就是用來存儲車輛上報的監(jiān)控相關信息的Topic,那么我們就把這個Topic創(chuàng)建到異步復制、異步刷盤這樣角色的Broker集群上

另外有需要云服務器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
網(wǎng)站名稱:RocketMQ企業(yè)級部署方案-創(chuàng)新互聯(lián)
當前網(wǎng)址:http://www.chinadenli.net/article20/dccsjo.html
成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供企業(yè)建站、定制開發(fā)、微信公眾號、靜態(tài)網(wǎng)站、網(wǎng)站收錄、網(wǎng)站設計
聲明:本網(wǎng)站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內容