分布式作业 Elastic Job 如何动态调整?

简介: 前面分享了两篇分布式作业调度框架 Elastic Job 的介绍及应用实战。ElasticJob-分布式作业调度神器分布式作业 Elastic Job 快速上手指南!Elastic Job 提供了简单易用的运维平台,方便用户监控、动态修改作业参数、作业操作及查询作业。

前面分享了两篇分布式作业调度框架 Elastic Job 的介绍及应用实战。


ElasticJob-分布式作业调度神器


分布式作业 Elastic Job 快速上手指南!


Elastic Job 提供了简单易用的运维平台,方便用户监控、动态修改作业参数、作业操作及查询作业。


设计理念

运维平台和elastic-job-lite并无直接关系,是通过读取作业注册中心数据展现作业状态,或更新注册中心数据修改全局配置。


控制台只能控制作业本身是否运行,但不能控制作业进程的启动,因为控制台和作业本身服务器是完全分离的,控制台并不能控制作业服务器。


功能列表

登录安全控制


注册中心、事件追踪数据源管理


快捷修改作业设置


作业和服务器维度状态查看


操作作业禁用\启用、停止和删除等生命周期


事件追踪查询


不支持项

添加作业

作业在首次运行时将自动添加,Elastic-Job-Lite 以 jar 方式启动,并无作业分发功能。如需完全通过运维平台发布作业,请使用 Elastic-Job-Cloud。


运维平台搭建

1、在官网下载最新稳定的源码包,地址如下。


https://github.com/elasticjob/elastic-job-lite


这里我们下载了最新的 2.1.5 的最新发布包。


2、编译下载后的源码包


下载后,随便解压到哪个目录,然后执行 mvn install 编译。

cd d:/elastic-job-lite-2.1.5
mvn install

3、启动运维平台


在编译目录 d:\elastic-job-lite-2.1.5\elastic-job-lite\elastic-job-lite-console\target 找到编译后的包: elastic-job-lite-console-2.1.5.tar.gz ,然后解压到 elastic-job-lite-console-2.1.5 ,并执行 bin 目录下的 start.bat 即可启动,Linux下为 start.sh。


8899 为默认端口号,可通过启动脚本输入 -p 自定义端口号。


4、访问运维平台


Elastic-Job 提供了两种账户:管理员及访客。管理员拥有全部操作权限,访客仅拥有察看权限。默认管理员用户名和密码是 root/root,访客用户名和密码是 guest/guest,可通过 conf\auth.properties 修改管理员及访客用户名及密码。

root.username=root
root.password=root
guest.username=guest
guest.password=guest

打开浏览器访问 http://localhost:8899/ 输出用户名和密码即可访问控制台。


5、连接到注册中心

运维平台搭建完后,需要添加目标注册中心,再进行连接。


6、作业操作

我们可以对作业配置进行修改、查看详情、失效、终止、手动触发作业等操作,但终止作业后,需要重启工程才能重新启动作业,控制台不能手动启动。


好了,这节的 Elastic-Job 运维平台搭建使用指南就到这里了,更多的内容大家可以去摸索,有问题可以去Java技术栈知识星球提问,星主会认真回答每个粉丝的提问。


相关文章
|
8月前
|
存储 分布式计算 监控
Hadoop【基础知识 01+02】【分布式文件系统HDFS设计原理+特点+存储原理】(部分图片来源于网络)【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】(图片来源于网络)
【4月更文挑战第3天】【分布式文件系统HDFS设计原理+特点+存储原理】(部分图片来源于网络)【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】(图片来源于网络)
358 2
|
6月前
|
存储 监控 NoSQL
Celery是一个基于分布式消息传递的异步任务队列/作业队列
Celery是一个基于分布式消息传递的异步任务队列/作业队列
|
8月前
|
分布式计算 监控 Hadoop
Hadoop【基础知识 02】【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】(图片来源于网络)
【4月更文挑战第3天】Hadoop【基础知识 02】【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】(图片来源于网络)
340 0
|
SQL Java 调度
大师级教程: 零基础掌握xxl-job分布式任务调度 Job Scheduling
大师级教程: 零基础掌握xxl-job分布式任务调度 Job Scheduling
488 0
大师级教程: 零基础掌握xxl-job分布式任务调度 Job Scheduling
|
存储 并行计算 网络协议
分布式数据库系统作业
分布式数据库系统作业
123 0
|
监控 Dubbo Java
唯品会开源分布式作业调度平台Saturn
Saturn英文意思是:土星,太阳系中的第二大行星。比地球高一个层级,地球是八大行星之一。而今天我们介绍的Saturn,是IT行业的一个分布式作业调度平台。
1251 0
唯品会开源分布式作业调度平台Saturn
|
机器学习/深度学习 自然语言处理 搜索推荐
分布式打分—Elastic Stack 实战手册
搜索引擎中的搜索与数据库中,常规的 SELECT 查询语句,都能帮你从一大堆数据中,找到匹配某个特定关键字的数据条目,但是这两者最大的区别在于,搜索引擎能够基于查询和结果的相关性,帮你做好结果集排序,即搜索引擎会将它认为最符合你查询诉求的数据条目,放在最前面,而数据库的 SELECT 语句却做不到。
293 0
分布式打分—Elastic Stack 实战手册
|
Java 中间件 API
分布式作业 Elastic-Job 快速上手指南,从理论到实战一文搞定!
Elastic-Job支持 JAVA API 和 Spring 配置两种方式配置任务,这里我们使用 JAVA API 的形式来创建一个简单的任务入门,现在都是 Spring Boot 时代了,所以不建议使用 Spring 配置文件的形式。 Elastic-Job 需要依赖 Zookeeper 中间件,用于注册和协调作业分布式行为的组件,目前仅支持 Zookeeper。我们已经创建了 Zookeeper 集群!
803 0
|
弹性计算 运维 自然语言处理
ElasticJob-分布式作业调度神器,你们还在用Quartz吗?!
简介 Elastic-Job是一个分布式调度解决方案,由两个相互独立的子项目Elastic-Job-Lite和Elastic-Job-Cloud组成。 Elastic-Job-Lite定
|
SQL 分布式计算 运维
双11史上作业数最多,人工干预最少—MaxCompute 自适应执行引擎DAG2.0为1.5亿分布式作业提供自动化保障
阿里巴巴双11史上作业数最多,但人工干预最少的一次双11技术保障: 从动态并发调整带来的单日10亿计算节点的节省,到数据智能编排带来的高级基线单个作业数十个小时执行时间的缩短,再到全新Bubble执行模式在百万作业获取的30%以上的性能提升。 本文为大家介绍,在2020年阿里巴巴集团双11海量作业数目与突变的数据特性面前,阿里云MaxCompute 新一代 DAG 2.0 执行引擎,通过其自适应的动态执行能力和新架构上的全新计算模式,如何为双11大促数据的及时产出提供自动化保障。
6439 0
双11史上作业数最多,人工干预最少—MaxCompute 自适应执行引擎DAG2.0为1.5亿分布式作业提供自动化保障
下一篇
开通oss服务