Hbase流程體系圖

---

10年積累的網(wǎng)站設(shè)計制作、成都網(wǎng)站設(shè)計經(jīng)驗，可以快速應(yīng)對客戶對網(wǎng)站的新想法和需求。提供各種問題對應(yīng)的解決方案。讓選擇我們的客戶得到更好、更有力的網(wǎng)絡(luò)服務(wù)。我雖然不認識你，你也不認識我。但先做網(wǎng)站設(shè)計后付款的網(wǎng)站建設(shè)流程，更有三河免費網(wǎng)站建設(shè)讓你可以放心的選擇與我們合作。

Hbase 寫數(shù)據(jù)流程

• 1、 client 向 hregionserver 發(fā)送寫請求。
• 2、hregionserver 將數(shù)據(jù)寫到 hlog (write ahead log )。為了數(shù)據(jù)的持久化和恢復(fù)。
• 3、 hregionserver 將數(shù)據(jù)寫到內(nèi)存 (memstore)
• 4、 反饋 client 寫成功。

數(shù)據(jù) flush 過程

• 1、 當 memstore 數(shù)據(jù)達到閾值(默認是 64M)，將數(shù)據(jù)刷到硬盤，將內(nèi)存中的數(shù)據(jù)刪除，同時刪除 hlog 中的歷史數(shù)據(jù)。
• 2、 并將數(shù)據(jù)存儲到 hdfs 中。
• 3、 在 hlog 中做標記點。

數(shù)據(jù)合并過程

• 1、 當數(shù)據(jù)達到 4 塊， hmaster 將數(shù)據(jù)塊加載到本地，進行合并
• 2、 當合并的數(shù)據(jù)超過 256M，進行拆分，將拆分后的 region 分配給不同的 hregionserver 管理
• 3、 當 hregionser 宕機后，將 和regionserver 上的 hlog 拆分，然后分配給不同的 hregionserver 加載，修改 .META。
• 4、 注意：hlog 會同步到 hdfs

Hbase 讀數(shù)據(jù)流程

• 1、 通過 zookeeper 和 -ROOT-.META。表定位 hregionserver 。
• 2、 數(shù)據(jù)從內(nèi)存和硬盤合并后返回 client
• 3、 數(shù)據(jù)塊會緩存

hmaster 的職責(zé)

• 1、 管理用戶對 table 的增、刪、改、查等操作。
• 2、 記錄 region 在哪臺 HRegion Server 上
• 3、 在 Region Split 后，負責(zé)新 Region 的分配
• 4、 新機器加入時，管理 HRegion Server 的負載均衡，調(diào)整 Region 分布
• 5、 在 HRegion Server 宕機后，負責(zé)失效 HRegion Server 上的 Region 遷移。

hmaster 的職責(zé)

• 1、 HRegion Server主要負責(zé)響應(yīng)用戶I/O請求，向HDFS文件系統(tǒng)中讀寫數(shù)據(jù)，是HBASE中最核心的模塊。
• 2、 HRegion Server管理了很多table的分區(qū)，也就是region。

client職責(zé)

• 1、 HBASE Client使用HBASE的RPC機制與HMaster和RegionServer進行通信
• 2、 管理類操作：Client與HMaster進行RPC；
• 3、 數(shù)據(jù)讀寫類操作：Client與HRegionServer進行RPC。

hbase依賴zookeeper

1、保存Hmaster的地址和backup-master地址

hmaster：

• a)管理HregionServer
• b)做增刪改查表的節(jié)點
• c)管理HregionServer中的表分配

2、保存表-ROOT-的地址
hbase默認的根表，檢索表。

3、HRegionServer列表
表的增刪改查數(shù)據(jù)。
和hdfs交互，存取數(shù)據(jù)。

Hbase 命令

名稱	命令表達式
創(chuàng)建表	create '表名', '列族名1','列族名2','列族名N'
查看所有表	list
描述表	describe ‘表名’
判斷表存在	exists '表名'
判斷是否禁用啟用表	is_enabled '表名'; is_disabled ‘表名’
添加記錄	put ‘表名’, ‘rowKey’, ‘列族 : 列‘ ,'值'
查看記錄rowkey下的所有數(shù)據(jù)	get '表名','rowKey'
查看表中的記錄總數(shù)	count '表名'
獲取某個列族	get '表名','rowkey','列族'
獲取某個列族的某個列	get '表名','rowkey','列族：列’
刪除記錄	delete ‘表名’ ,‘行名’ , ‘列族：列'
刪除整行	deleteall '表名','rowkey'
刪除一張表	先要屏蔽該表，才能對該表進行刪除。第一步 disable ‘表名’ ，第二步 drop '表名'
清空表	truncate '表名'
查看所有記錄	scan "表名"
查看某個表某個列中所有數(shù)據(jù)	scan "表名" , {COLUMNS=>'列族名:列名'}
更新記錄	就是重寫一遍，進行覆蓋，hbase沒有修改，都是追加

到這里 hbase 的基本原理，和使用命令就寫完了。

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn，海內(nèi)外云服務(wù)器15元起步，三天無理由+7*72小時售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機、免備案服務(wù)器”等云主機租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價比高”等特點與優(yōu)勢，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場景需求。

網(wǎng)頁名稱：Hbase原理-創(chuàng)新互聯(lián)
分享網(wǎng)址：http://www.chinadenli.net/article18/dgsdgp.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供微信公眾號、App開發(fā)、手機網(wǎng)站建設(shè)、做網(wǎng)站、電子商務(wù)、外貿(mào)網(wǎng)站建設(shè)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)