400-650-7353

精品课程

您所在的位置:首页 > IT干货资料 > 大数据 > 【大数据基础知识】HBase组件简介

【大数据基础知识】HBase组件简介

1.Client

用户通过Client(客户端)访问HBase。同时,为了提高对HBase的访问速度和效率,客户端还维护了一份缓存。

2.Zookeeper

Zookeeper主要起的作用是协同服务,这具体包括以下几个方面:

(1)HBase通过Zookeeper实现HMaster的高可用。同一时刻,Zoopkeeper保证集群中只有一个HMaster;如果HMaster出现异常,Zoopkeeper会通过选举产生新的HMaster。

(2)Zoopkeeper监控RegionServer的状态,如果RegionServer有异常或有新节点加入,Zookeeper会以回调方式通知HMaster。

(3)Zoopkeeper存储HBase元数据的统一入口地址。HBase真正的元数据存放在自己的meta表中,meta表的位置信息存储在Zookeeper中。

3.HMaster

HMaster是HBase集群的主节点,它的职责主要包括: RegionServer状态的监控、RegionServer的故障转移、元数据信息的更新、Region的分配、Region的故障转移和集群的负载均衡等。

4. HRegionServer

HRegionServer是HBase集群的从节点,负责用户的读写请求。它的职责主要包括:管理主节点分配给它的Region、处理读写请求、与底层HDFS的交互、拆分变大的Region

以及StoreFile的合并。

5.Region

Region是HBase表的分片。HBase根据RowKey的不同的把表切分成不同的Region。一个Region由一个RegionServer管理,同一个RegionServer中可以管理多个不同的Region。

6.Store

HBase表中的一个列族对应一个Store。Store中包含MemStore和StoreFile。

7.MemStore

MemStore就是内存存储,用于缓存保存刚写入HBase的数据或从HBase中读取的数据。MemStore很小,一般几兆到几十兆。

8. StoreFile

HBase写入数据时,当MemStore存储满后,会溢写磁盘到StoreFile中。

9.HFile

HFile是实际的存储文件。StoreFile是以HFile的形式存储在HDFS的。

10. HDFS

HDFS提供真正的底层数据存储服务,具体功能如下:

l 提供表数据和元数据的底层分布式存储服务

l 数据多副本,保证的HBase的高可靠和高可用

11.Write-Ahead logs

HBase读写数据时,数据会先在内存中保留一段时间,然后再写进磁盘。节点故障等因素有可能导致内存中的数据丢失。为了解决这个问题,HBase会先将数据写在Write-Ahead logfile日志文件中,然后再写入内存。这样,在系统出现故障时,数据就可以通过这个日志文件进行重建

课程好礼申请领取
您的姓名
您的电话
意向课程
 

中公优就业

官方QQ

扫描上方二维码或点击一键加群,免费领取价值599元网课,加群暗号:599。 一键加群

>>本文地址:
注:本站稿件未经许可不得转载,转载请保留出处及源文件地址。

推荐阅读

测一测
你适合学哪门IT技术?

1 您的年龄

2 您的学历

3 您更想做哪个方向的工作?

获取测试结果
 
课程资料、活动优惠 领取通道
 
 
网站地图 500万彩票网站电脑版pc 彩票快乐12开奖查询 999.金巴黎彩票.com
申博最新网址 申博手机网页版 大玩家娱乐平台 申博娱乐软件下载官网
大富彩票网游戏平台登入 乐发彩票二分彩 澳彩网北京时时彩 网上娱乐平台如何开
cc彩票网投 五星彩开奖号码 500w彩票网游戏 快乐彩票网
cc彩票客户端下载 58彩票网址 58彩票.com cc彩票注册
998PT.COM 988BBIN.COM 994sun.com 899BBIN.COM 298PT.COM
986XTD.COM 81ib.com 585sunbet.com 157ib.com 866TGP.COM
155TGP.COM 100xsb.com 581tt.com XSB687.COM 000XSB.COM
758sunbet.com 353SUN.COM 81ib.com 96jbs.com 11TGP.COM