开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks开发业务流程的具体步骤是什么?

DataWorks开发业务流程的具体步骤是什么?

展开
收起
真的很搞笑 2023-11-20 07:51:04 87 0
3 条回答
写回答
取消 提交回答
  • 创建周期业务流程https://help.aliyun.com/zh/dataworks/user-guide/create-a-workflow?spm=a2c4g.11186623.0.i113

    数据开发基于业务流程下对应的开发组件进行具体开发操作,所以您创建节点前需要先新建业务流程。创建业务流程前,您可以参考下文的设计业务流程章节,结合自身的业务情况,先规划设计好符合自身业务诉求的业务流程。以下为创建周期业务流程的详细步骤。

    进入数据开发页面。

    登录DataWorks控制台,单击左侧导航栏的数据建模与开发 > 数据开发,在下拉框中选择对应工作空间后单击进入数据开发。

    鼠标悬停至新建图标,单击新建业务流程。
    c079ca357c6b6bbd0721465e4d468942_p111276.png

    业务流程
    在新建业务流程对话框中,输入业务名称和描述。

    单击新建。

    2023-11-20 14:03:25
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    开发DataWorks业务流程主要包括以下几个步骤:

    1. 分析业务需求:分析整个业务流程中涉及的数据源、转换步骤、依赖关系等,梳理为一个初步的流程图。
    2. 划分任务节点:根据业务流程图,将任务划分成多个节点,并明确它们之间的依赖关系和并行度。
    3. 编写任务逻辑:根据业务规则,编写每个任务节点的逻辑,如SQL脚本、Python/Scala代码、配置文件等。
    4. 测试单个任务节点:分别测试每个任务节点,调整参数和配置,验证逻辑是否正确。
    5. 组装业务流程:将所有已编写的任务节点按照之前的依赖关系组装成一个完整的业务流程。
    6. 调试业务流程:运行调试版的业务流程,检查是否有错误,以及各个任务节点之间是否存在数据不一致等问题。
    7. 提交业务流程:如果一切正常,那么就可以提交业务流程到生产环境运行了。
    2023-11-20 13:38:38
    赞同 1 展开评论 打赏
  • 在DataWorks中,开发业务流程需要遵循一定的步骤。首先,您需要登录DataWorks控制台,然后单击左侧导航栏的"数据建模与开发 > 数据开发"选项,进入数据开发页面。接着,新建业务流程。每个业务流程都是多种类型对象的集合,包括API、函数和服务编排等。这些对象类型对应一个独立的文件夹,为了便于管理,建议子文件夹的层数不要超过4层。

    在新建业务流程后,您可以新建数据表。DataWorks支持使用可视化方式创建表,并以目录结构在界面展示。同时,也支持对创建的表执行相关操作。

    除此之外,您还需要根据业务种类将不同类型的资源组织在一起,即构成业务流程,以便更好地帮助您以业务为单元进行开发。例如,如果您的业务比较复杂,则可以创建符合企业实际应用的业务过程。

    2023-11-20 09:29:31
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载