阿里巴巴任务调度SchedulerX专业版公测

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 阿里巴巴分布式任务调度平台SchedulerX2.0的专业版本于2022.1.26正式公测,本次公测带来了全新的可视化功能,兼容开源xxl-job/elasticjob任务,支持一次性任务,融合大数据dataworks任务。

前言

阿里巴巴分布式任务调度平台SchedulerX2.0的专业版本于2022.1.26正式公测,本次公测带来了全新的可视化功能,兼容开源xxl-job任务,支持一次性任务,融合大数据dataworks任务。


可视化

日志服务

在当前微服务和容器化越来越流行的情况下,机器数量太多、没有权限登录容器,成为了业务同学无法快速定位业务失败的痛点。可视化白屏日志工具,越来越成为了企业的刚需。


SchedulerX2.0的日志服务,可以让业务方不需要修改一行代码,只需要增加一个log4j/logback的配置,即可将每次任务调度的框架日志和业务日志进行收集,同时提供白屏日志检索功能,可以通过任务调度平台快速定位任务失败的原因。

详情请参考:https://developer.aliyun.com/article/861431

image.png

查看堆栈

业务执行慢或者卡住,查看堆栈是最有效的手段,但是现在的应用往往都是分布式和多线程,如何快速定位是哪个机器哪个线程卡住,成为了用户的痛点。

SchedulerX2.0提供了白屏的查看堆栈功能,自动定位到任务执行的机器和线程,白屏打印堆栈信息,快速定位任务卡住的原因。

image.png

用户大盘

新增概览界面不但提供产品快报、用户手册、工单入口等能力,还将带来可视化的用户大盘功能。

用户大盘会统计当前任务总数、接入的worker数量、运行中的任务实例数等。未来还会增加调度历史曲线,失败任务top10,执行耗时任务top10等能力。

image.png


兼容开源

兼容xxl-job

SchedulerX2.0兼容XXL-JOB任务接口,支持@XxlJob新注解和@JobHandler老注解方式,用户不需要修改一行代码,即可以将XXL-JOB任务在SchedulerX2.0平台上托管,提供商业化的报警和可视化功能。

详情请参考: https://developer.aliyun.com/article/854993

兼容ElasticJob

SchedulerX2.0兼容开源ElasticJob任务接口,用户不需要修改一行代码,即可以将ElasticJob任务在SchedulerX2.0平台上托管,享有低成本、免运维、可视化、报警监控等能力。

详情请参考:https://developer.aliyun.com/article/874803


支持一次性任务

SchedulerX2.0支持一次性任务,可以在未来的某一时刻执行一次,任务自动销毁。

详情请参考:https://developer.aliyun.com/article/854985


融合大数据dataworks任务

在实际业务场景中业务处理往往依赖前置数据准备,目前在分布式任务调度平台上可进行dataworks任务数据处理与业务数据处理任务依赖编排定时调度。

详情请参考:https://developer.aliyun.com/article/855018


如何升级

通过概览页,右上角的一键升级

4F9394B2-04D9-42E3-8645-BB3320B06091.png


和基础版区别

基础版

专业版

基础调度能力

✔️

✔️

查看工作流图

/

✔️

日志服务

/

✔️

查看堆栈

/

✔️

用户大盘

/

✔️

任务导入导出

/

✔️

并行计算

最大300个子任务,无搜索能力

最大1000个子任务,有搜索能力

历史记录

最近10条/任务

最近100条/任务

报警

钉钉、邮件

钉钉,邮件,短信,电话

单应用分组任务数

1000

10万

API

仅支持创建、更新、删除任务

都支持

计费说明

按任务托管费用计费

任务托管CU=启用任务数*接入的worker数

公测期和基础版收费相同

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
分布式计算 并行计算 数据库
Schedulerx2.0分布式计算原理&最佳实践
1. 前言 Schedulerx2.0的客户端提供分布式执行、多种任务类型、统一日志等框架,用户只要依赖schedulerx-worker这个jar包,通过schedulerx2.0提供的编程模型,简单几行代码就能实现一套高可靠可运维的分布式执行引擎。
23827 2
|
SQL 分布式计算 监控
EMR Workflow 开启公测,100%兼容开源 Apache DolphinScheduler
EMR Workflow 是一个全托管的工作流和任务调度服务,100%兼容开源 Apache DolphinScheduler。它提供了易于使用的调度服务,您可以通过可视化的操作界面轻松地管理工作流和任务,高效构建数据仓库,并为生产任务的稳定运行提供保障。
685 1
|
存储 分布式计算 Cloud Native
阿里云 EMR 基于 Apache DolphinScheduler 产品技术实践和社区贡献
本文整理自阿里云 EMR 数据开发团队负责人孙一凡(Evans 忆梵),在 Apache Spark & DS Meetup 的分享
阿里云 EMR 基于 Apache DolphinScheduler 产品技术实践和社区贡献
|
分布式计算 大数据 Apache
直播预约|Apache Spark + DolphinScheduler Meetup 1月11日正式上线
洞悉 Spark 任务调度新能力|Apache Spark + DolphinScheduler Meetup 将于 1 月 11 日在线上举办
216 1
直播预约|Apache Spark + DolphinScheduler Meetup 1月11日正式上线
|
消息中间件 自然语言处理 Cloud Native
DolphinScheduler&RocketMQ 联合 Meetup 即将重磅开启,集中展示任务调度与消息队列能力!
作为消息队列和工作流任务调度的领先者,以及 Apache 基金会孵化器毕业的中国优秀项目,RocketMQ 和 DolphinScheduler 强强联手,邀请来自互联网企业大数据专家与社区核心开发者,为大家带来一场大数据开发技术以及生产场景实践的精彩分享!
DolphinScheduler&RocketMQ 联合 Meetup 即将重磅开启,集中展示任务调度与消息队列能力!
|
资源调度 分布式计算 运维
阿里巴巴任务调度SchedulerX支持一次性任务
阿里巴巴任务调度SchedulerX2.0支持一次性任务
1237 2
|
资源调度 运维 DataWorks
阿里分布式任务调度SchedulerX2.0支持Dataworks任务
在实际业务场景中业务处理往往依赖前置数据准备,目前在分布式任务调度平台上可进行dataworks任务数据处理与业务数据处理任务依赖编排定时调度。
1219 1
|
运维 资源调度 调度
阿里巴巴任务调度SchedulerX兼容XXL-JOB
阿里巴巴任务调度SchedulerX2.0兼容XXL-JOB任务接口,支持@XxlJob新注解和@JobHandler老注解方式,用户不需要修改一行代码,即可以将XXL-JOB任务在SchedulerX2.0平台上托管。
4187 1
阿里巴巴任务调度SchedulerX兼容XXL-JOB
|
资源调度 分布式计算 自然语言处理
EDAS之分布式任务调度SchedulerX系列文章
分布式任务调度SchedulerX2.0文章列表总览
598 1
|
运维 资源调度 监控
阿里巴巴任务调度SchedulerX兼容ElasticJob
阿里巴巴任务调度SchedulerX2.0兼容开源ElasticJob任务接口,用户不需要修改一行代码,即可以将ElasticJob任务在SchedulerX2.0平台上托管,享有低成本、免运维、可视化、报警监控等能力。
997 0
阿里巴巴任务调度SchedulerX兼容ElasticJob