`
ziwuzu
  • 浏览: 50270 次
  • 性别: Icon_minigender_1
  • 来自: 长春
社区版块
存档分类
最新评论

zookeeper

阅读更多

zookeeper可以用来管理配置信息,通过通知来广播信息。

https://cwiki.apache.org/confluence/display/ZOOKEEPER/Index

 

为维护配置信息,命名服务,提供分布式同步机制,提供组服务提供了一套集中式服务。

 

在分布式系统中,这些服务可能或多或少的被用到。但之前,每次要用到这些服务的时候,自己写一个,总会有这样那样的问题,比如单点问题,竞态条件等,而且写起来麻烦。

 

zookeeper将这些服务精炼为一个集中协调服务的简单接口。zookeeper是一个分布式的,也是高度可靠的。

它已经提供了一致性,组管理,存活状态协议的实现。所以我们不必自己实现这些。

 

zookeeper 通过树形的数据节点来支持分布式的进程之间相互协作,这个结构有点像文件系统。但与普通文件系统不同的是,zookeeper提供了高通量,低延迟,高可用性,严格有序的数据服务。zookeeper的命名空间跟Linux的文件系统类似,都是树型的,根目录 “/”。与linux文件系统最大的不同是,zookeeper的每一个节点都有数据。但zookeeper每个节点的数据是有限的。

 

zookeeper是设计用来存储协作信息的:配置信息,资源定位信息,状态信息的。这种元信息通常只有几字节或几KB。为了防止有人滥用zookeeper来存储大量数据,zookeeper内部有完整性约束:每个节点的数据最多不超过1M。通常情况下数据比这小得多。

 

zookeeper服务在组成集群的服务器之间是复制的,这些服务器维护一个内存数据树,一个事务日志,一个持久化的数据快照。因为数据是存在内存中的,所以能够提供高通量和低延迟。内存数据库一个缺点是:zookeeper所能维护的数据量大小受限于内存大小。这也是要保持zookeeper中数据量要小的一个原因。

 

zookeeper服务器之间是互相知晓的,只要大部分服务器可用,那么zookeeper就是可用的。客户端也需要知道zookeeper服务器的列表,以此来创建zookeeper的连接器。

 

zookeeper客户端只连到单台zookeeper服务器,维护一个TCP连接,通过这个连接来发送请求,接收响应,接收事件。如果连接挂了,客户端会连到另一台服务器。

 

读请求会被客户端连接的zookeeper服务器直接处理,如果读请求在一个数据节点上注册了一个监听器(watch), 那么这个监听器也是被本地服务器所维护的。写请求在返回之前,会转发到其他所有zookeeper服务器,达到数据一致性。而同步请求也会转发到另一台服务器,但不保证所有服务器数据一致。因此读请求的吞吐量倾向于增加服务器,写请求的吞吐量倾向于减少服务器。

 

顺序性对zookeeper非常重要,差不多到了强迫症的程度。所有的更新有全序关系。zookeeper用数字给每次更新都打了一个戳,用来标识顺序。我们称这个数字为zxid(zookeeper transaction id)。每次更新有个唯一的zxid。读和监听也通过zxid来排序了。读请求的响应会被服务器打个戳,这个戳就是这个服务器收到的最新的zxid。

 

分享到:
评论

相关推荐

    zookeeper日志查看工具

    #Zookeeper的日志可以用LogFormatter查看 ##命令方式如下 java -classpath .:slf4j-api-1.7.2.jar:zookeeper-3.4.6.jar org.apache.zookeeper.server.LogFormatter /var/lib/zookeeper/version-2/log.1 ##window...

    1、zookeeper3.7.1安装与验证

    1、zookeeper3.7.1安装与验证 网址:https://blog.csdn.net/chenwewi520feng/article/details/130280946 zookeeper的安装与验证分为4个部分,即环境准备、部署、验证和环境变量设置。 由于zookeeper需要非root用户,...

    zookeeper-3.4.11.tar.gz

    ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、...

    apache-zookeeper-3.7.1

    apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper-3.7.1 apache-zookeeper...

    ZooKeeper-分布式过程协同技术详解.pdf

    第三部分(第9~10章)主要介绍ZooKeeper内部原理及如何运行ZooKeeper.第9章介绍ZooKeeper的作者们在设计时所采用的方案。第10章介绍如何对ZooKeeper进行配置。 购买地址:https://item.jd.com/11880788.html

    zookeeper 3.6.3 源码下载

    zookeeper 3.6.3 源码

    【BAT必备】zookeeper面试题

    【BAT必备】zookeeper面试题【BAT必备】zookeeper面试题【BAT必备】zookeeper面试题【BAT必备】zookeeper面试题【BAT必备】zookeeper面试题【BAT必备】zookeeper面试题【BAT必备】zookeeper面试题【BAT必备】...

    zookeeper安装包 支持window

    Zookeeper是一个分布式的服务框架,是树型的目录服务的数据存储,能做到集群管理数据 ,这里能很好的作为Dubbo服务的注册中心。 Dubbo能与Zookeeper做到集群部署,当提供者出现断电等异常停机时,Zookeeper注册中心...

    Zookeeper篇.pdf

    1.0 zookeeper 是什么? 1.1 zookeeper 提供了什么? 1.2 zookeeper 文件系统 1.3 zookeeper 的四种类型的 znode 1.4 zookeeper 通知机制 1.5 zookeeper 有哪些应用场景? 1.6 zk 的命名服务 1.7 zk 的配置管理服务 ...

    apache-zookeeper-3.5.10-bin 环境搭配

    apache-zookeeper-3.5.10-bin 环境搭配 ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,...

    zookeeper-3.4.6-API文档-中文版.zip

    赠送jar包:zookeeper-3.4.6.jar; 赠送原API文档:zookeeper-3.4.6-javadoc.jar; 赠送源代码:zookeeper-3.4.6-sources.jar; 赠送Maven依赖信息文件:zookeeper-3.4.6.pom; 包含翻译后的API文档:zookeeper-...

    zookeeper可视化工具

    zookeeper可视化工具

    zookeeper linux集群搭建流程

    zookeeper linux 搭建流程,zookeeper linux 搭建流程zookeeper linux 搭建流程zookeeper linux 搭建流程。

    zookeeper-3.4.9-API文档-中文版.zip

    赠送jar包:zookeeper-3.4.9.jar; 赠送原API文档:zookeeper-3.4.9-javadoc.jar; 赠送源代码:zookeeper-3.4.9-sources.jar; 赠送Maven依赖信息文件:zookeeper-3.4.9.pom; 包含翻译后的API文档:zookeeper-...

    zookeeper-3.3.6.tar.gz

    解压 zookeeper-3.3.6.tar.gz 4、进入conf目录,cp zoo_sample.cfg to zoo.cfg,根据你的要求进行修改 [plain] view plain copy tickTime=2000 dataDir=/data/zookeeper/ clientPort=2181 initLimit=5 ...

    twill-zookeeper-0.6.0-incubating-API文档-中文版.zip

    赠送jar包:twill-zookeeper-0.6.0-incubating.jar; 赠送原API文档:twill-zookeeper-0.6.0-incubating-javadoc.jar; 赠送源代码:twill-zookeeper-0.6.0-incubating-sources.jar; 赠送Maven依赖信息文件:twill-...

    Zookeeper学习笔记.pdf

    ZooKeeper是一种为分布式应用所设计的高可用、高性能且一致的开源协调服务,它提供了一项基本服务:**分布式锁服务**。由于ZooKeeper的开源特性,后来我们的开发者在分布式锁的基础上,摸索了出了其他的使用方法:**...

    centos8安装zookeeper3.8.0详细步骤

    centos8安装zookeeper3.8.0详细步骤

    ZooKeeper-分布式过程协同技术详解 和从Paxos到Zookeeper

    ZooKeeper-分布式过程协同技术详解 和 从Paxos到Zookeeper 分布式一致性原理与实践 电子书。喜欢请支持种作者。购买纸质版

    zookeeper安全漏洞修复

    ZooKeeper 未授权访问【原理扫描】,zookeeper安全漏洞修复方法和操作步骤

Global site tag (gtag.js) - Google Analytics