由一个STOP命令挖出Ambari如何下发任务

简介:

天龙系统部署MINIRDS失败,重试时,Ambari会对所有已经安装成功的组件下发一个STOP命令。对这个STOP,处女座的@风煜表示不能忍,so。。。开始啃Ambari源码之路。。。

抓包发现重试时,前端向server发送了一个PUT请求

ok,这个PUT请求到server端之后,server到底做了什么呢??

如下图所示,一个API如何产生部署阶段->stage

在Ambari中什么是stage呢,以部署MINIRDS为例,需要部署GLOBALCONFIG,METADB,BAKDB,PERFDB.....等等等等。

这些任务如PERFDB,BAKDB必须依赖METADB,所以部署PERFDB时必须保证METADB部署完成,所以GLOBALCOONFIG、METADB为第一阶段,PERFDB,BAKDB为第二阶段。

总体来讲,stage的任务规划是按照DAG的方式来实现的。什么是DAG?

`DAG:在图论中,如果一个有向图无法从任意顶点出发经过若干条边回到该点,则这个图是一个有向无环图(DAG图)。
因为有向图中一个点经过两种路线到达另一个点未必形成环,因此有向无环图未必能转化成树,但任何有向树均为有向无环图。`

如何实现DAG?

在Ambari server算法中,所有的service作为一个结点(即METADB、GLOBALCONFIG),节点间的依赖关系为eage(边),如PERFDB依赖METADB,所以有一条METADB指向PERFDB的边。

如何划分stage?

遍历所有节点,将入度(指向该节点的边的个数)为0的节点作为一个stage,并将这些节点从原来哈希表中删除。
循环直至,所有节点都划分完毕。

从数据库中的数据验证结果。。。。

为什么会给安装好的组件下发STOP命令呢?

这是Ambari Controller的策略。在ambari server中,每个component都有一个状态机,当重试时,component状态为INSTALLED时,controller会向对应状态机执行STOP命令对应的HOST_SERVICE_COMPONENT_EVENT。

相关文章
|
2月前
|
缓存 监控 安全
zabbix服务器监控之了解agent的启动过程
zabbix服务器监控之了解agent的启动过程
34 0
|
12月前
|
监控 Shell Apache
监控httpd的进程数,根据监控情况做相应处理
监控httpd的进程数,根据监控情况做相应处理
76 1
|
12月前
|
C++
C++采用Daemon进行后台程序部署
在C++中,如果要让一个程序一直在后台运行并且和终端会话分离,我们可以将其作为守护进程运行,以下是创建C++守护进程的一般步骤。
74 0
|
12月前
|
Shell Linux
任务管理与守护进程
任务管理与守护进程
114 0
|
监控 Oracle 关系型数据库
Zabbix5.0监控ogg并自动拉起进程
Zabbix5.0监控ogg并自动拉起进程
577 0
|
传感器 监控 Linux
使用资源监控工具 glances
lances 是一款用于 Linux、BSD 的开源命令行系统监视工具,它使用 Python 语言开发,能够监视 CPU、负载、内存、磁盘 I/O、网络流量、文件系统、系统温度等信息。本文介绍 glances 的使用方法和技巧,帮助 Linux 系统管理员了解掌握服务器性能。
1522 0
|
监控 应用服务中间件 Shell
zabbix4.0配置对指定进程监控
zabbix4.0配置对指定进程监控
3717 0
|
机器学习/深度学习 监控 应用服务中间件
监控命令之tsar
1.1 tsar是什么?   tsar是淘宝自己开发的一个采集工具(类似于sar工具),主要用来收集服务器的系统信息(如cpu,io,mem,tcp等),以及应用数据(如squid haproxy nginx等)。
2035 0
|
监控
zabbix 监控windwos CPU
zabbix本身有一个监控windwos cpu的监控项,但是感觉的数据是什么鬼,看不懂啊,所以决定自己加一个监控项 默认模板自带监控项展示出来的图形: 图片.
1391 0