暂无图片
暂无图片
暂无图片
暂无图片
暂无图片
ClickHouse生产运维系列[部署篇]-02_Zookeeper介绍及集群安装部署.pdf
196
10页
2次
2024-03-06
25墨值下载
一、ZooKeeper介绍
ZookeeperApache开源的一个分布式框架,它主要为分布式应用提供协调服务。
Zookeeper最早由雅虎研究院开发,是Google Chubby的开源实现,后来托管到Apache,并于2010
11月正式成为Apache的顶级项目。
有个比较有意思的是,大数据生态系统里很多组件选用动物或昆虫来命名,比如我们所熟知的
Hadoop是头可爱的大象、Hive是一只蜜蜂、Camel是一头骆驼,ZooKeeper图像是什么呢,是一个动物
园管理者。
Apache ZooKeeper是一个开源的分布式协调服务,它为分布式应用提供了一套简单而强大的基础架
构服务,用以实现诸如配置管理、命名服务、分布式同步以及提供组服务等功能。ZooKeeper的设计目
标是将这些复杂的分布式协调过程封装成一个简单的接口,从而使分布式应用的开发变得更加容易和可
靠。
核心概念
ZooKeeper的数据模型类似于一个文件系统,以层次化的目录树形式组织数据,每个节点称为一个
Znode。这些Znode可以存储数据,并且可以有子节点。不仅如此,ZooKeeper还为这些Znode提供了
临时节点和观察者(Watcher)机制,增强了其在分布式环境中的应用场景。
临时节点:这是一种特殊类型的节点,当创建它的客户端会话结束时,这个节点会被自动删
除。这对于实现锁和选举机制非常有用。
观察者(Watcher:客户端可以在Znode上设置观察者,当这个Znode发生变化(如数据更
改、节点删除、子节点变化)时,设置了观察者的客户端会收到通知。
使用场景
ZooKeeper在分布式系统中的典型使用场景包括:
配置管理:动态地更新和管理分布式环境中的配置信息。
命名服务:为分布式系统中的资源和服务提供全局唯一的名称。
分布式锁:在分布式环境中协调和控制资源的访问。
集群管理:监控入群和退群的节点,以及节点状态的变化。
强一致性保证
ZooKeeper保证了一系列强一致性的特性,包括顺序一致性、原子性、单一视图、可靠性和实时性
(或最终一致性)。这些保证使得ZooKeeper成为构建可靠分布式系统的坚实基础。
开发和运行要求
ZooKeeperJava编写,因此它需要Java运行时环境。根据ZooKeeper的不同版本,对Java版本有不
同的要求,通常推荐使用Java 8或更高版本以确保最佳兼容性和性能。
二、ZooKeeperClickHouse-Keeper对比
ClickHouse-KeeperClickHouse21.8版本开始引入的一个组件,旨在作为ZooKeeper的替代
品,用于管理ClickHouse集群的元数据和一些协调任务。下面是基于集成度、性能、配置和维护、兼容
性、功能、社区和支持、稳定性和成熟度、开发语言、快照和日志处理等几个维度,对ClickHouse-
Keeper和原生ZooKeeper进行的对比。
集成度
ClickHouse-Keeper:与ClickHouse紧密集成,为ClickHouse设计,提供了更为直接和高效
的集成方式,减少了第三方依赖。
ZooKeeper:作为一个独立的服务运行,需要额外的部署和配置步骤来与ClickHouse或其他应
用集成。
性能
ClickHouse-Keeper:由于是为ClickHouse量身定制,性能上有针对性的优化,特别是在处理
大量并发请求和高负载情况下,表现可能更优。
ZooKeeper:虽然性能稳定且在分布式系统中表现良好,但在极端负载或特定场景下可能不如
ClickHouse-Keeper优化得更为精细。
配置和维护
ClickHouse-Keeper:配置和维护更为简化,尤其是在ClickHouse环境中,因为可以共享一些
配置和监控工具。
ZooKeeper:需要独立配置和维护,对于不熟悉ZooKeeper的用户来说,学习曲线可能更陡
峭。
兼容性
ClickHouse-Keeper:设计时考虑到与ZooKeeper的兼容性,但主要集中在ClickHouse的使
用场景。
ZooKeeper:广泛用于各种分布式系统,兼容性和适用范围更广。
功能
ClickHouse-Keeper:虽然提供了ZooKeeper的核心功能,但可能在某些高级功能上有所缺失
或差异。
ZooKeeper:成熟、功能丰富,支持广泛的用例和场景。
社区和支持
ClickHouse-Keeper:作为ClickHouse生态的一部分,享有ClickHouse社区的支持,但社区
相对较小。
ZooKeeper:有一个庞大且活跃的社区,得到了广泛的支持和贡献,包括官方文档和第三方资
源。
稳定性和成熟度
ClickHouse-Keeper:虽然经过ClickHouse团队的精心设计和测试,但相对较新,可能在某些
边缘情况下稳定性不如ZooKeeper
ZooKeeper:历经多年发展,被广泛认为是分布式系统中的稳定和成熟解决方案。
开发语言
ClickHouse-Keeper:使用与ClickHouse相同的开发语言(主要是C++),有助于提高项目内
部的协同效率。
ZooKeeper:主要使用Java开发,这对Java生态系统的用户更为友好。
快照和日志处理
ClickHouse-Keeper:优化了快照和日志的处理,特别是在与ClickHouse数据和操作相关的场
景中。
of 10
25墨值下载
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文档的来源(墨天轮),文档链接,文档作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

文档被以下合辑收录

评论

关注
最新上传
暂无内容,敬请期待...
下载排行榜
Top250 周榜 月榜