开发者社区> 问答> 正文

DataWorks如何创建调度任务

已解决

DataWorks如何创建调度任务

展开
收起
提个问题! 2024-06-03 10:06:59 22 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    以下为调度任务创建与运维的基本操作步骤。
    调度任务开发
    • 开发调度任务脚本:DataWorks将引擎计算引擎能力进行封装,您可以基于引擎节点进行数据开发,无需接触复杂的引擎命令行,即可在DataWorks实现各类任务的周期性调度,并支持通过DataWorks可视化方式创建引擎表,资源,以及注册函数等操作。DataWorks支持的任务类型详情请参见:DataWorks节点类型合集
    • 调试任务代码:支持调试单个节点与整个工作流程。
    • 任务调度配置:若需要进行周期性调度运行,您需要定义该节点的调度相关属性,包括节点调度依赖调度参数等。
    • 发布调度任务生产环境:DataWorks仅支持自动调度发布至生产环境的任务,因此在校验无误后,您需将任务发布至生产环境调度系统进行周期调度。
    调度任务运维
      • 运行方式:DataWorks中,调度任务会根据调度类型及周期数生成相应的周期实例(例如,小时调度任务每天会根据周期数产生相应数量的小时实例),通过实例的方式运行任务。
      • 运行时间:任务开始调度时间由实例生成方式,任务调度时间、上游任务执行情况等多方面因素控制。详情请参见:任务运行诊断
    • 手动触发调度任务执行
    • 测试运行: 您可以通过对周期任务执行测试操作,以验证当前周期任务在生产环境的调度运行是否符合预期。
    • 数据回刷: 补数据可通过补历史或未来一段时间的数据,写入数据至对应时间分区。代码中若使用调度参数,则该参数将根据补数据选择的业务时间自动替换为具体值,结合业务代码将对应时间数据写入对应分区。
    配置示例
    创建第一个周期调度任务,详情请参见:数据开发入门
    2024-06-03 10:07:00
    赞同 1 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
DataWorks全链路数据质量解决方案-2020飞天大数据平台实战应用第一季 立即下载
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载