dataworks开发环境的调度,现在仍然不会自动调度是吧?只有生产环境的才能调度起来
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
但需要手动触发。与生产环境不同的是,开发环境的调度是不会自动触发的,需要手动在DataWorks控制台中触发调度。
在DataWorks中,开发环境和生产环境是分开的,开发环境主要用于数据开发、测试和调试,生产环境则用于数据生产和运行。在开发环境中,用户可以创建和调试各种数据开发任务,例如SQL查询、数据同步、数据质量评估等。在调试完成后,用户可以手动触发开发环境的调度,验证任务的正确性和可靠性。
与开发环境不同的是,生产环境的调度是可以自动触发的。在生产环境中,用户可以设置调度周期和调度依赖,使得任务能够按照预定的时间和顺序自动触发。生产环境的调度是非常重要的,它直接影响到数据的生产和运行,因此需要特别注意调度的设置和管理。
在DataWorks中,调度任务是通过周期任务来实现的。这些周期任务可以根据预设的调度策略,在指定时间自动触发执行。
在开发环境中,默认情况下,周期任务是不会自动调度的。只有当你将任务发布到生产环境后,才能进行自动调度。
以下是一般的开发流程:
在DataWorks的开发环境中创建和开发任务,配置相关的ETL逻辑、数据转换等。
在开发环境中手动触发执行任务,进行测试和调试。
当任务开发完成并通过测试后,将任务发布到生产环境。
在生产环境中,配置合适的调度策略和周期,使任务能够按照预设的时间自动调度执行。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。