您可以基于业务流程对应引擎分组下的数据开发节点来进行具体的数据清洗工作,例如MaxCompute引擎下的ODPS SQL节点,如果代码开发过程中需要用到资源或函数,DataWorks也支持您通过可视化的方式来创建资源节点、创建函数节点。https://help.aliyun.com/zh/dataworks/user-guide/create-a-workflow?spm=a2c4g.11186623.0.i32
说明
目前DataWorks对引擎能力的封装、产品层面对开发能力的支持情况请参见数据开发概述。https://help.aliyun.com/zh/dataworks/user-guide/overview-26#section-7ac-0rz-k9l
节点的调度依赖,调度属性相关配置请参见调度配置。
在DataWorks业务流程中,函数是一组逻辑操作的集合,它们可以用于处理复杂的数据和任务。函数可以将一组逻辑组合起来,便于维护和复用。函数可以接受参数,并返回一个结果。
您可以在DataWorks中创建函数,以及使用函数来实现自动化任务和复杂的逻辑操作
在DataWorks中,函数是业务流程开发的重要组成部分之一。一个业务流程是由多种类型的对象集合组成,包括API、函数和服务编排。这些对象均存放在对应的目录下,以便于管理。例如,函数对应独立的文件夹,这样可以更好地组织和管理业务流程,提高开发和调试效率。
同时,DataWorks提供了周期业务流程和手动业务流程两种类型的业务流程。周期业务流程可以按照设定的时间周期自动执行,适用于需要周期性调度的任务;而手动业务流程则可以在任何需要的时候手动触发运行,为用户提供了更多的灵活性。
总的来说,函数在DataWorks的业务流程中扮演着关键的角色,使得业务的开发和执行更为高效和灵活。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。