分布式作业 Elastic Job 如何动态调整?

简介: 前面分享了两篇分布式作业调度框架 Elastic Job 的介绍及应用实战。ElasticJob-分布式作业调度神器分布式作业 Elastic Job 快速上手指南!Elastic Job 提供了简单易用的运维平台,方便用户监控、动态修改作业参数、作业操作及查询作业。

前面分享了两篇分布式作业调度框架 Elastic Job 的介绍及应用实战。


ElasticJob-分布式作业调度神器


分布式作业 Elastic Job 快速上手指南!


Elastic Job 提供了简单易用的运维平台,方便用户监控、动态修改作业参数、作业操作及查询作业。


设计理念

运维平台和elastic-job-lite并无直接关系,是通过读取作业注册中心数据展现作业状态,或更新注册中心数据修改全局配置。


控制台只能控制作业本身是否运行,但不能控制作业进程的启动,因为控制台和作业本身服务器是完全分离的,控制台并不能控制作业服务器。


功能列表

登录安全控制


注册中心、事件追踪数据源管理


快捷修改作业设置


作业和服务器维度状态查看


操作作业禁用\启用、停止和删除等生命周期


事件追踪查询


不支持项

添加作业

作业在首次运行时将自动添加,Elastic-Job-Lite 以 jar 方式启动,并无作业分发功能。如需完全通过运维平台发布作业,请使用 Elastic-Job-Cloud。


运维平台搭建

1、在官网下载最新稳定的源码包,地址如下。


https://github.com/elasticjob/elastic-job-lite


这里我们下载了最新的 2.1.5 的最新发布包。


2、编译下载后的源码包


下载后,随便解压到哪个目录,然后执行 mvn install 编译。

cd d:/elastic-job-lite-2.1.5
mvn install

3、启动运维平台


在编译目录 d:\elastic-job-lite-2.1.5\elastic-job-lite\elastic-job-lite-console\target 找到编译后的包: elastic-job-lite-console-2.1.5.tar.gz ,然后解压到 elastic-job-lite-console-2.1.5 ,并执行 bin 目录下的 start.bat 即可启动,Linux下为 start.sh。


8899 为默认端口号,可通过启动脚本输入 -p 自定义端口号。


4、访问运维平台


Elastic-Job 提供了两种账户:管理员及访客。管理员拥有全部操作权限,访客仅拥有察看权限。默认管理员用户名和密码是 root/root,访客用户名和密码是 guest/guest,可通过 conf\auth.properties 修改管理员及访客用户名及密码。

root.username=root
root.password=root
guest.username=guest
guest.password=guest

打开浏览器访问 http://localhost:8899/ 输出用户名和密码即可访问控制台。


5、连接到注册中心

运维平台搭建完后,需要添加目标注册中心,再进行连接。


6、作业操作

我们可以对作业配置进行修改、查看详情、失效、终止、手动触发作业等操作,但终止作业后,需要重启工程才能重新启动作业,控制台不能手动启动。


好了,这节的 Elastic-Job 运维平台搭建使用指南就到这里了,更多的内容大家可以去摸索,有问题可以去Java技术栈知识星球提问,星主会认真回答每个粉丝的提问。


相关文章
|
5月前
|
存储 并行计算 网络协议
分布式数据库系统作业
分布式数据库系统作业
75 0
|
6月前
|
SQL Java 调度
大师级教程: 零基础掌握xxl-job分布式任务调度 Job Scheduling
大师级教程: 零基础掌握xxl-job分布式任务调度 Job Scheduling
140 0
大师级教程: 零基础掌握xxl-job分布式任务调度 Job Scheduling
|
Java 中间件 API
分布式作业 Elastic-Job 快速上手指南,从理论到实战一文搞定!
Elastic-Job支持 JAVA API 和 Spring 配置两种方式配置任务,这里我们使用 JAVA API 的形式来创建一个简单的任务入门,现在都是 Spring Boot 时代了,所以不建议使用 Spring 配置文件的形式。 Elastic-Job 需要依赖 Zookeeper 中间件,用于注册和协调作业分布式行为的组件,目前仅支持 Zookeeper。我们已经创建了 Zookeeper 集群!
415 0
|
SQL 分布式计算 运维
双11史上作业数最多,人工干预最少—MaxCompute 自适应执行引擎DAG2.0为1.5亿分布式作业提供自动化保障
阿里巴巴双11史上作业数最多,但人工干预最少的一次双11技术保障: 从动态并发调整带来的单日10亿计算节点的节省,到数据智能编排带来的高级基线单个作业数十个小时执行时间的缩短,再到全新Bubble执行模式在百万作业获取的30%以上的性能提升。 本文为大家介绍,在2020年阿里巴巴集团双11海量作业数目与突变的数据特性面前,阿里云MaxCompute 新一代 DAG 2.0 执行引擎,通过其自适应的动态执行能力和新架构上的全新计算模式,如何为双11大促数据的及时产出提供自动化保障。
6298 0
双11史上作业数最多,人工干预最少—MaxCompute 自适应执行引擎DAG2.0为1.5亿分布式作业提供自动化保障
|
分布式计算 运维 API
【MaxCompute Spark】不想自己搭Spark集群, 也能跑Spark分布式作业???
【MaxCompute Spark】不想自己搭Spark集群, 也能跑Spark分布式作业???
|
Java Maven Spring
分布式作业 Elastic-Job 快速上手指南,从理论到实战一文搞定!
Elastic-Job支持 JAVA API 和 Spring 配置两种方式配置任务,这里我们使用 JAVA API 的形式来创建一个简单的任务入门,现在都是 Spring Boot 时代了,所以不建议使用 Spring 配置文件的形式。
1608 0
|
1月前
|
NoSQL 算法 安全
Redlock 算法-主从redis分布式锁主节点宕机锁丢失的问题
Redlock 算法-主从redis分布式锁主节点宕机锁丢失的问题
152 0
|
1月前
|
NoSQL 关系型数据库 MySQL
分布式锁(redis/mysql)
分布式锁(redis/mysql)
54 1
|
3月前
|
NoSQL Java 测试技术
字节二面:Spring Boot Redis 可重入分布式锁实现原理?
字节二面:Spring Boot Redis 可重入分布式锁实现原理?
155 1
|
20天前
|
NoSQL Java Redis
如何通俗易懂的理解Redis分布式锁
在多线程并发的情况下,我们如何保证一个代码块在同一时间只能由一个线程访问呢?
31 2