400-650-7353
您所在的位置:首頁 > IT干貨資料 > 大數據 > 【大數據基礎知識】HBase組件簡介

【大數據基礎知識】HBase組件簡介

  • 發布: 大數據培訓
  • 來源:大數據干貨資料
  • 2021-03-18 19:46:59
  • 閱讀()
  • 分享
  • 手機端入口

1.Client

用戶通過Client(客戶端)訪問HBase。同時,為了提高對HBase的訪問速度和效率,客戶端還維護了一份緩存。

2.Zookeeper

Zookeeper主要起的作用是協同服務,這具體包括以下幾個方面:

(1)HBase通過Zookeeper實現HMaster的高可用。同一時刻,Zoopkeeper保證集群中只有一個HMaster;如果HMaster出現異常,Zoopkeeper會通過選舉產生新的HMaster。

(2)Zoopkeeper監控RegionServer的狀態,如果RegionServer有異;蛴行鹿濣c加入,Zookeeper會以回調方式通知HMaster。

(3)Zoopkeeper存儲HBase元數據的統一入口地址。HBase真正的元數據存放在自己的meta表中,meta表的位置信息存儲在Zookeeper中。

3.HMaster

HMaster是HBase集群的主節點,它的職責主要包括: RegionServer狀態的監控、RegionServer的故障轉移、元數據信息的更新、Region的分配、Region的故障轉移和集群的負載均衡等。

4. HRegionServer

HRegionServer是HBase集群的從節點,負責用戶的讀寫請求。它的職責主要包括:管理主節點分配給它的Region、處理讀寫請求、與底層HDFS的交互、拆分變大的Region

以及StoreFile的合并。

5.Region

Region是HBase表的分片。HBase根據RowKey的不同的把表切分成不同的Region。一個Region由一個RegionServer管理,同一個RegionServer中可以管理多個不同的Region。

6.Store

HBase表中的一個列族對應一個Store。Store中包含MemStore和StoreFile。

7.MemStore

MemStore就是內存存儲,用于緩存保存剛寫入HBase的數據或從HBase中讀取的數據。MemStore很小,一般幾兆到幾十兆。

8. StoreFile

HBase寫入數據時,當MemStore存儲滿后,會溢寫磁盤到StoreFile中。

9.HFile

HFile是實際的存儲文件。StoreFile是以HFile的形式存儲在HDFS的。

10. HDFS

HDFS提供真正的底層數據存儲服務,具體功能如下:

l 提供表數據和元數據的底層分布式存儲服務

l 數據多副本,保證的HBase的高可靠和高可用

11.Write-Ahead logs

HBase讀寫數據時,數據會先在內存中保留一段時間,然后再寫進磁盤。節點故障等因素有可能導致內存中的數據丟失。為了解決這個問題,HBase會先將數據寫在Write-Ahead logfile日志文件中,然后再寫入內存。這樣,在系統出現故障時,數據就可以通過這個日志文件進行重建

文章“【大數據基礎知識】HBase組件簡介”已幫助

>>本文地址:http://www.siyuangc.com/zhuanye/2021/67988.html

THE END  

聲明:本站稿件版權均屬中公教育優就業所有,未經許可不得擅自轉載。

1 您的年齡

2 您的學歷

3 您更想做哪個方向的工作?

獲取測試結果
  • 大前端大前端
  • 大數據大數據
  • 互聯網營銷互聯網營銷
  • JavaJava
  • Linux云計算Linux
  • Python+人工智能Python
  • 嵌入式物聯網嵌入式
  • 全域電商運營全域電商運營
  • 軟件測試軟件測試
  • 室內設計室內設計
  • 平面設計平面設計
  • 電商設計電商設計
  • 網頁設計網頁設計
  • 全鏈路UI/UE設計UI設計
  • VR/AR游戲開發VR/AR
  • 網絡安全網絡安全
  • 新媒體與短視頻運營新媒體
  • 直播帶貨直播帶貨
  • 智能機器人軟件開發智能機器人
 

快速通道fast track

近期開班時間TIME

亚洲中字幕日产2021草莓 色欲av蜜臀一区二区三区| 97人人模人人爽人人少妇| 朋友的人妻的滋味bd高清中文| 青柠在线观看高清播放百度网盘| 小舞两腿乳液自慰羞羞漫画| 久久久久久久久| 男同桌上课用手指进去了好爽| 男神插曲女生疼在线播放| 黄色视频在线观看免费| av影音先锋|