canal 启动介绍(2)

简介: 概述        本篇主要是为了讲清楚canal是如何启动的,从文章内容结构来说主要分为流程图、时序图、核心源码三大块。理解一个东西宏观上一定要理清楚层次,然后细节再去追求融会贯通。

概述    

    本篇主要是为了讲清楚canal是如何启动的,从文章内容结构来说主要分为流程图、时序图、核心源码三大块。理解一个东西宏观上一定要理清楚层次,然后细节再去追求融会贯通。希望你们会喜欢。


canal启动流程图


img_386b4728f4df502ef1bb5c750f19038a.png
canal启动流程图

说明:

    整个canal的启动过程过程其实大的分为3个过程,分别入口的main函数启动,配置的加载,服务的启动。main的函数启动就没说可以说的,基本上就一个启动入口,着重讲讲配置的加载。

    配置的加载,canal的配置主要分为全局配置和实例配置,全局配置就是启动canal需要的配置,实例配置就是启动Instance需要的配置,这个可以参考后面给出的canal配置章节。

    启动过程,启动过程从宏观层面来说应该包括 启动embededCanalServer、启动CanalServerWithNetty,启动Instance服务。如果在这个基础上再考虑的话还需要考虑Instance层面的HA监控和配置变更监控,以及Server的HA监控。


canal启动时序图


img_ae9536c1c3b02ea1496f16854c25995c.png
canal启动时序图

说明

    canal启动的时序图其实是对canal的流程图进行了细分,其实总体来看也是两大块,配置的加载,服务的启动。

    配置的加载包括:全局配置的加载、instance配置的加载、创建embededCanalServer和CanalServerWithNetty实例、创建server的对应monitor对象(用于HA)、autoscan的监控、创建zkClient实例。

    服务启动包括:注册自身节点到zk节点、订阅zk节点信息、启动embededCanalServer实例、启动CanalServerWithNetty实例、启动instance服务(包括metaManager、alarmHandler、eventStore、eventSink、eventParser)、启动instance配置监听、启动instance config配置监听。


canal 启动源码解析


配置加载

img_96295e3b64f6e9d61838be08ae43576c.png
配置加载-1
img_c8537a8a67999328f541f30d0bc0dfe1.png
配置加载-2


服务启动

img_f85048aac53fb5599ea7a4f77bf395f9.png
服务启动-1
img_228b9b790ed2c17ab7798446b3c66407.png
服务启动-2


canal配置文件

canal配置文件目录

img_ad59b38ebb4408ac77f31d39af28e539.png
canal配置

说明

    canal的配置主要分为3大块,分别是canal的全局配置canal.properties、instance的配置instance.properties、以及instance的spring的配置file-instance.xml。


canal全局配置

img_d4dd497f9312e4fe6a9af586c711259a.png
canal全局配置

说明

    canal的全局配置,基本上可以看到一些全局的配置。


canal的instance配置

img_ff3e5159bdedabe42412e4bcdc49b697.png
canal的instance配置

说明

    canal的instance配置是指连接mysql的实例的配置,这个大家仔细看就能看懂。


canal-instance-sprint实例配置

img_3b7e55d7e8c8103ed5fed1761802338c.png
instance-spring配置

说明

    spring配置其实是用于构建spring-factory用于创建instance实例使用的,从上图就可以看出来。可以看到canal的instance各个组件包括eventParser、eventSink、eventStore、metaManager。

目录
相关文章
|
canal SQL 关系型数据库
|
canal SQL 关系型数据库
Canal报错总结(三)
Canal报错总结(三)
|
canal 关系型数据库 MySQL
Canal服务搭建
Canal服务搭建
1149 1
Canal服务搭建
|
7月前
|
消息中间件 Java Kafka
Kafka【环境搭建 01】kafka_2.12-2.6.0 单机版安装+参数配置及说明+添加到service服务+开机启动配置+验证+chkconfig配置说明(一篇入门kafka)
【2月更文挑战第19天】Kafka【环境搭建 01】kafka_2.12-2.6.0 单机版安装+参数配置及说明+添加到service服务+开机启动配置+验证+chkconfig配置说明(一篇入门kafka)
260 1
|
5月前
|
canal 监控 关系型数据库
Canal使用和安装总结
Canal使用和安装总结
214 2
|
5月前
|
消息中间件 Kafka
kafka配置中启动zookeeper时没有启动成功的解决办法
kafka配置中启动zookeeper时没有启动成功的解决办法
|
7月前
|
存储 Linux 数据库
ZooKeeper【搭建 01】apache-zookeeper-3.6.2 单机版安装+配置+添加到service服务+开机启动配置+验证+chkconfig配置(一篇入门zookeeper)
【4月更文挑战第8天】ZooKeeper【搭建 01】apache-zookeeper-3.6.2 单机版安装+配置+添加到service服务+开机启动配置+验证+chkconfig配置(一篇入门zookeeper)
219 0
|
canal druid 关系型数据库
Canal报错总结(二)
Canal报错总结(二)
|
存储 分布式计算 Hadoop
ZooKeeper的集群部署和启动与关闭
ZooKeeper的集群部署和启动与关闭
|
canal 关系型数据库 MySQL
Canal
Canal是一个用于MySQL数据增量订阅和消费的开源组件,支持多种数据订阅方式,包括基于GTID位点的订阅。
1114 0