ZooKeeper 常用应用场景原理详解

ZooKeeper 常用应用场景原理详解ZooKeeper 常用应用场景原理详解,zookepper存放数据的目录结构类似于标准的文件系统格式,如果使用过window或linux就能体会到其内部的数据结构

大家好,又见面了,我是你们的朋友全栈君。

          ZooKeeper 常用应用场景原理详解

             zookepper存放数据的目录结构类似于标准的文件系统格式,如果使用过window或linux就能体会到其内部的数据结构,简化结果如下:

           ZooKeeper 常用应用场景原理详解

       主要基本概念

             1.每个目录都被称为znode,如唯一标识分别为为“/org”,”/com/lance” 和 “/com/lance/zk”。
             2.每个znode可以存储数据,
             3.znode的类型
                    a. PERSISTENT    
                                   // 该znode不会在client断开时被zookepper自动删除,除非client端主动删除
                    b. PERSISTENT_SEQUENTIAL  
                                     // 该znode不会在client断开时被zookepper自动删除,除非client端主动删除, 
                                     // 且znode的名字后缀会添加上单调递增的数字,实现自动编号
                    c. EPHEMERAL        
                                     // 该znode会在client断开时被zookepper自动删除
                    d. EPHEMERAL_SEQUENTIAL      
                                     // 该znode会在client断开时被zookepper自动删除,
                                     // 且znode的名字后缀会添加上单调递增的数字,实现自动编号
              4.EPHEMERAL节点不能有子节点目录
              5.znode有版本概念
              6.znode可以被client监控,当该节点发生变化时,zookepper将向client发送通知(但不会把修改后的数据发给client,client要想获取修改后的数据,必须重新读取该目录下的数据)

              7. Watcher接口,Client向Zookepper注册某个znode节点的监控,并传入Watcher的实现类(如class WatcherImpl implments Watcher),当该znode节点发生变更时,Zookepper就会通过回调执行WatcherImpl.process()方法,以进行下一步的操作。

    1. 数据订阅/发布

              使用Zookepper的订阅/场景可以实现配置中心,即数据发布/订阅系统

               例如,项目的配置数据放在了/com/lance/zk目录下,n台机器实现对/com/lance/zk目录的监控,即注册一个Watcher监控(implments Watcher),当/com/lance/zk节点发生数据变更时,n台机器将获得变更通知,从而n台机器重新获取/com/lance/zk目录下的数据。

      2. 心跳检测

            在分布式系统中,各机器之间需要知道其他机器是否运行正常,最原始的方法是通过固定时间间隔的PING或建立长连接的方式检测心跳。如果基于Zookepper的话,在Zookeeper指定目录下每台机器都创建EPHEMERAL临时子节点,这样不同的机器就根据这些临时子节点判断其他机器是否正常,这样各机器之间不再直接耦合关联。

       3. 负载均衡

          假如我们在/com/lance/zk为域名节点,3个provider将自己的机器IP和端口号192.168.0.1:8001、192.168.0.2:8001、192.168.0.3:8001都注册到/com/lance/zk节点,当有一个consumer向zookepper获取/com/lance/zk目录下的IP列表,通过hash,轮询或随机方式获取其中一个IP,然后调用。

         心跳检测:client使用固定时间间隔,如3秒,向zookepper发送服务其状态是否正常信息,一旦超过3秒没有没有收到状态信息,那么就认为该IP不可用,于是该IP就会被清理。         

        典型的实现例子:alibaba的dubbo服务

       4.全局唯一ID生成服务

             每一个client根据自己的属性,如机器IP:172.17.110.2,通过create()接口创建EPHEMERAL_SEQUENTIAL 类型的znode,zookepper返回“172.17.110.2-00000000011”,client拿到返回值后,再添加具体的服务类型,如:createData,则就获取了全局唯一ID:createData-172.17.110.2-00000000011。

         5. 任务进度汇总

           各服务机器将自己的任务进行进度写入到Zookepper的指定临时节点中,这样系统中心和各台机器都能够获取其他任务的进度。

         6. 集群管理

                 集群管理中心在Zookepper的/com/lance/clusters节点上添加一个Watcher监听,所有被管理的机器都在/com/lance/clusters创建临时子节点,如/com/lance/clusters/hostName,被管理的机器需要在指定时间间隔,如3秒,内向/com/lance/clusters/hostName发起会话,如果超时这个时间间隔没有发起会话,者Zookepper认为该机器已经宕机,就会删除/com/lance/clusters/hostName这个临时子节点,这样管理中心就能够检测到每台机器的运行情况了。

        参考资料:1.《从PAXOS到ZOOKEEPER分布式一致性原理与实践》.作者:倪超

                            2. 分布式服务框架 Zookeeper — 管理分布式环境中的数据

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/149568.html原文链接:https://javaforall.net

(0)
上一篇 2022年6月17日 上午7:00
下一篇 2022年6月17日 上午7:00


相关推荐

  • 串口调试工具–SecureCRT的使用

    串口调试工具–SecureCRT的使用说明 SecureCRT 如何连接 调试 记录 log

    2026年3月26日
    2
  • python和pycharm以及anaconda的安装顺序_简述信息消息信号三者的区别与联系

    python和pycharm以及anaconda的安装顺序_简述信息消息信号三者的区别与联系1、致欢迎词我将详细讲述在学Python初期的各种手忙脚乱的问题的解决,通过这些步骤的操作,让你的注意力集中在Python的语法上以及后面利用Python所解决的项目问题上。而我自己作为小白,很不幸的没有错过任何的坑,都跳了进去,所以在这里写下经验贴,一方面希望能给后来的学者能够高效的避开这些坑,另一方面也算是自己的总结与警告。2、内容大纲2.1安装顺序能够使用Python的安装…

    2022年8月26日
    6
  • 【Java】室友打一把王者就学会了多线程

    【Java】室友打一把王者就学会了多线程一 前言线程可能听起来有点难 其实也是非常好理解的 咱们以游戏姿势进入 二 线程和进程进程 是正在运行的 进程是资源分配的最小单位 线程 是 cpu 调度的最小单位 线程依赖于进程 上面可能有些难懂 打个比喻 好比你打一把王者农药 其实我不玩哈 doge 进程比作是你开的那一把游戏 线程比作成每个玩家所选的英雄或者是游戏中的水晶野怪等之类的 带着这个比喻来理解进程和线程的一些关系 一个进程有多个线程就叫多线程 是不是感觉非常好理解 1 线程在进程下进行 1

    2026年3月18日
    2
  • 树莓派视觉小车 — 人脸追踪(人脸识别、PID控制舵机运动)[通俗易懂]

    树莓派视觉小车 — 人脸追踪(人脸识别、PID控制舵机运动)[通俗易懂]效果展示基础理论(人脸识别)人脸检测算法按照方法可以被分为两大类,基于特征的算法、基于图像的算法。1、基于特征的算法基于特征的算法就是通过提取图像中的特征和人脸特征进行匹配,如果匹配上了就说明是人脸,反之则不是。提取的特征是人为设计的特征,例如Haar,FHOG,特征提取完之后,再利用分类器去进行判断。通俗的说就是采用模板匹配,就是用人脸的模板图像与待检测的图像中的各个位置进行匹配,匹配的内容就是提取的特征,然后再利用分类器进行判断是否有人脸。…

    2022年5月9日
    42
  • zabbix添加snmp监控项_SNMP协议

    zabbix添加snmp监控项_SNMP协议目录一、SNMPTrap消息处理流程二、snmptt1、SNMPTrap、snmptt安装2、配置文件修改3、SNMPTrapFile文件创建4、监控项创建三、perl脚本 1、SNMPTrap安装2、从zabbix源码包中拷贝perl脚本到/usr/bin/目录下,并增加执行权限3、修改snmptrapd.conf配置4、修改zabbix配置 …

    2022年8月20日
    9
  • 修改cmd 命令行中的用户名|C:\Users\下的用户名[通俗易懂]

    修改cmd 命令行中的用户名|C:\Users\下的用户名[通俗易懂]修改→cmd命令行中的用户名|C:\Users\下的用户名1.打开运行输入regedit回车2.定位到HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\WindowsNT\CurrentVersion\ProfileList3.选中下面名字最长的项,双击右侧ProfileImagePath,修改c:\user后的用户名第一步,修改用户名cmdcontro…

    2022年10月7日
    5

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号