• <b id="gimrh"><noscript id="gimrh"></noscript></b>
    1. <video id="gimrh"><menu id="gimrh"></menu></video>
      <tt id="gimrh"><tbody id="gimrh"></tbody></tt>

      400-650-7353
      您所在的位置:首頁 > IT干貨資料 > 大數據 > 【大數據基礎知識】HBase組件簡介

      【大數據基礎知識】HBase組件簡介

      • 發布: 大數據培訓
      • 來源:大數據干貨資料
      • 2021-03-18 19:46:59
      • 閱讀()
      • 分享
      • 手機端入口

      1.Client

      用戶通過Client(客戶端)訪問HBase。同時,為了提高對HBase的訪問速度和效率,客戶端還維護了一份緩存。

      2.Zookeeper

      Zookeeper主要起的作用是協同服務,這具體包括以下幾個方面:

      (1)HBase通過Zookeeper實現HMaster的高可用。同一時刻,Zoopkeeper保證集群中只有一個HMaster;如果HMaster出現異常,Zoopkeeper會通過選舉產生新的HMaster。

      (2)Zoopkeeper監控RegionServer的狀態,如果RegionServer有異;蛴行鹿濣c加入,Zookeeper會以回調方式通知HMaster。

      (3)Zoopkeeper存儲HBase元數據的統一入口地址。HBase真正的元數據存放在自己的meta表中,meta表的位置信息存儲在Zookeeper中。

      3.HMaster

      HMaster是HBase集群的主節點,它的職責主要包括: RegionServer狀態的監控、RegionServer的故障轉移、元數據信息的更新、Region的分配、Region的故障轉移和集群的負載均衡等。

      4. HRegionServer

      HRegionServer是HBase集群的從節點,負責用戶的讀寫請求。它的職責主要包括:管理主節點分配給它的Region、處理讀寫請求、與底層HDFS的交互、拆分變大的Region

      以及StoreFile的合并。

      5.Region

      Region是HBase表的分片。HBase根據RowKey的不同的把表切分成不同的Region。一個Region由一個RegionServer管理,同一個RegionServer中可以管理多個不同的Region。

      6.Store

      HBase表中的一個列族對應一個Store。Store中包含MemStore和StoreFile。

      7.MemStore

      MemStore就是內存存儲,用于緩存保存剛寫入HBase的數據或從HBase中讀取的數據。MemStore很小,一般幾兆到幾十兆。

      8. StoreFile

      HBase寫入數據時,當MemStore存儲滿后,會溢寫磁盤到StoreFile中。

      9.HFile

      HFile是實際的存儲文件。StoreFile是以HFile的形式存儲在HDFS的。

      10. HDFS

      HDFS提供真正的底層數據存儲服務,具體功能如下:

      l 提供表數據和元數據的底層分布式存儲服務

      l 數據多副本,保證的HBase的高可靠和高可用

      11.Write-Ahead logs

      HBase讀寫數據時,數據會先在內存中保留一段時間,然后再寫進磁盤。節點故障等因素有可能導致內存中的數據丟失。為了解決這個問題,HBase會先將數據寫在Write-Ahead logfile日志文件中,然后再寫入內存。這樣,在系統出現故障時,數據就可以通過這個日志文件進行重建

      文章“【大數據基礎知識】HBase組件簡介”已幫助

      >>本文地址:http://www.threeriversmusicproducts.com/zhuanye/2021/67988.html

      THE END  

      聲明:本站稿件版權均屬中公教育優就業所有,未經許可不得擅自轉載。

      領取零基礎自學IT資源

      (內含學習路線+視頻教程+項目源碼)

      涉及Java、Web前端、UI設計、軟件測試、Python等多個IT熱門方向

      打開微信掃一掃即可領取哦~

      1 您的年齡

      2 您的學歷

      3 您更想做哪個方向的工作?

      獲取測試結果
      • 大前端大前端
      • 大數據大數據
      • 互聯網營銷互聯網營銷
      • JavaJava
      • Linux云計算Linux
      • Python+人工智能Python
      • 嵌入式物聯網嵌入式
      • 全域電商運營全域電商運營
      • 軟件測試軟件測試
      • 室內設計室內設計
      • 平面設計平面設計
      • 電商設計電商設計
      • 網頁設計網頁設計
      • 全鏈路UI/UE設計UI設計
      • VR/AR游戲開發VR/AR
      • 網絡安全網絡安全
      • 新媒體與短視頻運營新媒體
      • 直播帶貨直播帶貨
      • 智能機器人軟件開發智能機器人
       

      快速通道fast track

      近期開班時間TIME

      bl乱J伦高HH

    2. <b id="gimrh"><noscript id="gimrh"></noscript></b>
      1. <video id="gimrh"><menu id="gimrh"></menu></video>
        <tt id="gimrh"><tbody id="gimrh"></tbody></tt>