Watcher机制(二)WatchManager

简介: 本文深入分析ZooKeeper中WatchManager类的源码,介绍其核心数据结构watchTable与watch2Paths,详解size、addWatch、removeWatcher、triggerWatch等同步方法的实现机制,揭示Watcher注册、触发与移除的底层逻辑,帮助理解ZooKeeper事件监听体系的工作原理。

一、前言
  前面已经分析了Watcher机制中的第一部分,即在org.apache.zookeeper下的相关类,接着来分析org.apache.zookeeper.server下的WatchManager类。
二、WatchManager源码分析
2.1 类的属性 
public class WatchManager {
// Logger
private static final Logger LOG = LoggerFactory.getLogger(WatchManager.class);

// watcher表
private final HashMap<String, HashSet<Watcher>> watchTable =
    new HashMap<String, HashSet<Watcher>>();

// watcher到节点路径的映射
private final HashMap<Watcher, HashSet<String>> watch2Paths =
    new HashMap<Watcher, HashSet<String>>();

}
说明:WatcherManager类用于管理watchers和相应的触发器。watchTable表示从节点路径到watcher集合的映射,而watch2Paths则表示从watcher到所有节点路径集合的映射。
2.2 核心方法分析

  1. size方法
    public synchronized int size(){
    int result = 0;
    for(Set watches : watchTable.values()) { // 遍历watchTable所有的值集合(HashSet集合)
     // 每个集合大小累加
     result += watches.size();
    
    }
    // 返回结果
    return result;
    }
    说明:可以看到size方法是同步的,因此在多线程环境下是安全的,其主要作用是获取watchTable的大小,即遍历watchTable的值集合。
  2. addWatch方法
    public synchronized void addWatch(String path, Watcher watcher) {
    // 根据路径获取对应的所有watcher
    HashSet list = watchTable.get(path);
    if (list == null) { // 列表为空

     // don't waste memory if there are few watches on a node
     // rehash when the 4th entry is added, doubling size thereafter
     // seems like a good compromise
     // 新生成watcher集合
     list = new HashSet<Watcher>(4);
     // 存入watcher表
     watchTable.put(path, list);
    

    }
    // 将watcher直接添加至watcher集合
    list.add(watcher);

    // 通过watcher获取对应的所有路径
    HashSet paths = watch2Paths.get(watcher);
    if (paths == null) { // 路径为空

     // cnxns typically have many watches, so use default cap here
     // 新生成hash集合
     paths = new HashSet<String>();
     // 将watcher和对应的paths添加至映射中
     watch2Paths.put(watcher, paths);
    

    }
    // 将路径添加至paths集合
    paths.add(path);
    }
    说明:addWatch方法同样是同步的,其大致流程如下
      ① 通过传入的path(节点路径)从watchTable获取相应的watcher集合,进入②
      ② 判断①中的watcher是否为空,若为空,则进入③,否则,进入④
      ③ 新生成watcher集合,并将路径path和此集合添加至watchTable中,进入④【类似缓存操作】
      ④ 将传入的watcher添加至watcher集合,即完成了path和watcher添加至watchTable的步骤,进入⑤
      ⑤ 通过传入的watcher从watch2Paths中获取相应的path集合,进入⑥
      ⑥ 判断path集合是否为空,若为空,则进入⑦,否则,进入⑧
      ⑦ 新生成path集合,并将watcher和paths添加至watch2Paths中,进入⑧
      ⑧ 将传入的path(节点路径)添加至path集合,即完成了path和watcher添加至watch2Paths的步骤。
    综上:addWatche方法会将:
    1.入参所对应的watcher添加到入参path所对应的全部Watcher集合中,如path下已有则添加,没有创建新的并添加进去;
    2.入参所对应的path添加到入参watcher所对应给的所有路径集合中,如watcher对应路径为空则创建新的集合进行添加,非空将入参path直接添加进去。

  3. removeWatcher方法  
    public synchronized void removeWatcher(Watcher watcher) {
    // 从wach2Paths中移除watcher,并返回watcher对应的path集合
    HashSet paths = watch2Paths.remove(watcher);
    if (paths == null) { // 集合为空,直接返回
     return;
    
    }
    for (String p : paths) { // 遍历路径集合
     // 从watcher表中根据路径取出相应的watcher集合
     HashSet<Watcher> list = watchTable.get(p);
     if (list != null) { // 若集合不为空
         // 从list中移除该watcher
         list.remove(watcher);
         if (list.size() == 0) { // 移除后list为空,则从watch表中移出
             watchTable.remove(p);
         }
     }
    
    }
    }
    说明:removeWatcher用作从watch2Paths和watchTable中中移除该watcher,其大致步骤如下
      ① 从watch2Paths中移除传入的watcher,并且返回该watcher对应的路径集合,进入②
      ② 判断返回的路径集合是否为空,若为空,直接返回,否则,进入③
      ③ 遍历②中的路径集合,对每个路径,都从watchTable中取出与该路径对应的watcher集合,进入④
      ④ 若③中的watcher集合不为空,则从该集合中移除watcher,并判断移除元素后的集合大小是否为0,若为0,进入⑤
      ⑤ 从watchTable中移除路径
  4. triggerWatch方法
    public Set triggerWatch(String path, EventType type, Set supress) {
    // 根据事件类型、连接状态、节点路径创建WatchedEvent
    WatchedEvent e = new WatchedEvent(type, KeeperState.SyncConnected, path);

    // watcher集合
    HashSet watchers;
    synchronized (this) { // 同步块

     // 从watcher表中移除path,并返回其对应的watcher集合
     watchers = watchTable.remove(path);
     if (watchers == null || watchers.isEmpty()) { // watcher集合为空
         if (LOG.isTraceEnabled()) { 
             ZooTrace.logTraceMessage(LOG, ZooTrace.EVENT_DELIVERY_TRACE_MASK,
                                      "No watchers for " + path);
         }
         // 返回
         return null;
     }
     for (Watcher w : watchers) { // 遍历watcher集合
         // 根据watcher从watcher表中取出路径集合
         HashSet<String> paths = watch2Paths.get(w);
         if (paths != null) { // 路径集合不为空
             // 则移除路径
             paths.remove(path);
         }
     }
    

    }
    for (Watcher w : watchers) { // 遍历watcher集合

     if (supress != null && supress.contains(w)) { // supress不为空并且包含watcher,则跳过
         continue;
     }
     // 进行处理
     w.process(e);
    

    }
    return watchers;
    }
     说明:该方法主要用于触发watch事件,并对事件进行处理。其大致步骤如下
      ① 根据事件类型、连接状态、节点路径创建WatchedEvent,进入②
      ② 从watchTable中移除传入的path对应的键值对,并且返回path对应的watcher集合,进入③
      ③ 判断watcher集合是否为空,若为空,则之后会返回null,否则,进入④
      ④ 遍历②中的watcher集合,对每个watcher,从watch2Paths中取出path集合,进入⑤
      ⑤ 判断④中的path集合是否为空,若不为空,则从集合中移除传入的path。进入⑥
      ⑥ 再次遍历watcher集合,对每个watcher,若supress不为空并且包含了该watcher,则跳过,否则,进入⑦
      ⑦ 调用watcher的process方法进行相应处理,之后返回watcher集合。【这里的process具体怎么执行的呢】

  5. dumpWatches方法
    public synchronized void dumpWatches(PrintWriter pwriter, boolean byPath) {
    if (byPath) { // 控制写入watchTable或watch2Paths
     for (Entry<String, HashSet<Watcher>> e : watchTable.entrySet()) { // 遍历每个键值对
         // 写入键
         pwriter.println(e.getKey());
         for (Watcher w : e.getValue()) { // 遍历值(HashSet<Watcher>)
             pwriter.print("\t0x");
             pwriter.print(Long.toHexString(((ServerCnxn)w).getSessionId()));
             pwriter.print("\n");
         }
     }
    
    } else {
     for (Entry<Watcher, HashSet<String>> e : watch2Paths.entrySet()) { // 遍历每个键值对
         // 写入"0x"
         pwriter.print("0x");
         pwriter.println(Long.toHexString(((ServerCnxn)e.getKey()).getSessionId()));
         for (String path : e.getValue()) { // 遍历值(HashSet<String>)
             // 
             pwriter.print("\t");
             pwriter.println(path);
         }
     }
    
    }
    }
      说明:dumpWatches用作将watchTable或watch2Paths写入磁盘。
    三、总结
      WatchManager类用作管理watcher、其对应的路径以及触发器,其方法都是针对两个映射的操作。
目录
相关文章
|
10月前
|
缓存 Java 开发工具
QLExpress使用及源码分析
QLExpress是阿里巴巴开源的轻量级规则引擎,支持通过YAML配置规则脚本,结合注解实现Java方法与表达式映射。通过别名机制、AST解析和上下文赋值,实现灵活的动态逻辑执行,适用于复杂业务规则场景。
370 0
|
10月前
|
XML 存储 SQL
SpringBoot整合Logback,滚动记录+多文件
logback-spring.xml配置文件实现日志分级输出,支持控制台、文件滚动存储,按模块(如SQL、支付、任务等)分离日志,通过LogProxy获取指定名称的Logger,便于定位问题。配置灵活,适用于多环境部署。
192 0
|
10月前
|
存储 Ubuntu Shell
容器命令
`docker run` 命令用于创建并启动容器,支持交互式(-it)和守护式(-d)运行。常用参数包括:--name(命名)、-p(端口映射)、-v(数据卷挂载)、-e(环境变量)等。可通过 `docker start/stop/restart` 控制容器状态,`docker exec` 进入运行中容器,`docker commit` 将容器保存为新镜像。数据卷实现持久化存储,支持容器间共享。
465 0
|
10月前
|
JSON Linux 数据格式
Registry搭建docker私仓
Docker Registry是官方提供的私有镜像仓库构建工具。通过拉取registry镜像并运行容器,可快速搭建私服。需配置daemon.json启用http支持,重启Docker后,使用tag和push命令上传镜像,通过curl验证内容,实现私有化镜像管理。
342 0
|
10月前
|
安全 Linux Shell
Docker镜像
镜像是包含软件运行所需代码、依赖库、配置等的轻量级可执行包。Docker利用联合文件系统实现分层结构,通过bootfs和rootfs构成镜像底层,支持镜像共享与复用。容器启动时在镜像顶层添加可写容器层,所有修改仅作用于该层,保障镜像安全与高效。
242 0
|
10月前
|
Java 大数据 Apache
Excel工具-HUTOOL-输出Excel
基于Hutool与Apache POI,封装Excel写入功能,提供ExcelWriter和BigExcelWriter,支持List、Map、Bean等数据类型导出,可自定义样式、多Sheet操作,并避免内存溢出,适用于高效生成Excel文件及Web下载场景。
505 0
|
10月前
|
Apache
Excel工具-HUTOOL-读取Excel
基于Hutool和Apache POI,封装Excel读取工具,支持读取为List、Map或Bean;提供SAX模式高效解析大文件,避免内存溢出,适用于Excel 2003/2007格式,支持按行处理数据。
442 0
|
10月前
|
缓存 Ubuntu Linux
Docker安装
本文介绍在CentOS系统上安装Docker的完整步骤,包括卸载旧版本、配置阿里云镜像源、安装最新或指定版本的Docker引擎,并启动服务。同时涵盖Ubuntu系统的安装方法及离线安装方式,支持配置系统服务、daemon.json参数、日志管理与命令补全,最后通过`hello-world`验证安装成功。
417 0
|
10月前
|
JSON 安全 Java
SpringBoot鉴权
本文介绍基于Spring Security与JWT的客户端Token认证方案,涵盖实现思路、详细配置及代码实现。通过自定义过滤器与认证逻辑,结合JWT生成与验签,保障Spring Boot应用安全,支持角色与权限控制,构建完整的RBAC权限体系。(239字)
219 0
|
10月前
|
Java Maven 数据安全/隐私保护
Nexus仓库
本文介绍Nexus Repository Manager OSS在Linux环境下的安装与配置,包括JDK8安装、Nexus部署、仓库管理、用户权限设置及密码重置方法。支持通过Docker快速部署,并实现数据持久化。同时涵盖Maven、NPM、Docker等组件的私服搭建与资源上传下载配置,助力企业构建高效私有仓库体系。(239字)
860 0