锐客网

  1. 首页 > 生活百科 > it技术 > >

zookeeper在hbase集群的作用，hbase组件中zookeeper的主要功能

IT技术zookeeper

要不要用hbase自带的zookeeper?可以不使用，HBASE有自带的zookeeper 。
不需要，hadoop集群只需要装好jdk，就能运行！spark也不用zookeeper ， spark高可用依赖zookeeper ， kafka必须依赖zookeeper 。
HBase依赖Zookeeper提供消息通信机制 。与FUJITSU Cliq等商用大数据产品不同，HBase是Google Bigtable的开源实现 ， 类似Google Bigtable利用GFS作为其文件存储系统 。
如果你需要用单独的zookeeper，这里需要把#去掉 ， 并将true改成false ， 如果你用hbase自带的zookeeper，这句则可以不用修改，因为这也是他默认的设置 。
HBase存储架构1、hbase的核心数据结构为LSM树 。LSM树分为内存部分和磁盘部分 。内存部分是一个维护有序数据集合的数据结构 。
2、HBase采用了类似Google Bigtable的数据模型，即一个稀疏的、分布式的、持久化的多维映射表，每个表都由行键、列族、列限定符和时间戳组成 。
3、而HBase中的数据存储是基于列族（columnfamily）和行键（rowkey）的，HBase的数据存储结构是按行键排序的有序映射表，可以通过行键的前缀匹配来检索数据 。
4、/hbase/.archiveHBase 在做 Split或者 compact 操作完成之后 ， 会将 HFile 移到.archive 目录中，然后将之前的 hfile 删除掉 ， 该目录由 HMaster 上的一个定时任务定期去清理 。
Zookpeer是什么?在系统中如何起作用?）kafka 维护 （新）2）zookpeer 维护 (旧) ，已经逐渐被废弃 所以 ， 脚本只查看由broker维护的，由zookeeper维护的可以将 --bootstrap-server 换成 --zookeeper 即可 。
CAP定理说明上述的三个要素不能兼顾，最多只能满足其中的两个要素 ， 在分布式系统中 ， 一般都是保证分区容错性 ， 而在一致性和可用性之间做取舍 。因此存在CP、AP两种分布式集群的实现 。
在项目中使用redis，主要是从两个角度去考虑：性能和并发 。当然，redis还具备可以做分布式锁等其他功能，但是如果只是为了分布式锁这些其他功能，完全还有其他中间件(如zookpeer等)代替，并不是非要使用redis 。
一 为什么使用 Redis在项目中使用 Redis，主要考虑两个角度：性能和并发 。如果只是为了分布式锁这些其他功能，还有其他中间件 Zookpeer 等代替，并非一定要使用 Redis 。
【zookeeper在hbase集群的作用，hbase组件中zookeeper的主要功能】zookeeper在hbase集群的作用的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于hbase组件中zookeeper的主要功能、zookeeper在hbase集群的作用的信息别忘了在本站进行查找喔 。

    推荐阅读


    上一篇：如何将数据表显示在php，php如何把数据存到数据库中

    下一篇：jqueryeasyui树的简单介绍