开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

Dataworks自定义参数和系统参数

已解决

Dataworks自定义参数和系统参数

展开
收起
阿里云服务支持 2022-12-13 12:10:35 366 0
2 条回答
写回答
取消 提交回答
  • 推荐回答
    官方回答

    bizdate是Dataworks的系统参数,如果对时间参数有其他的格式需求,建议用自定义时间参数不要用系统默认参数,详情请参见帮助文档

    2022-12-13 13:12:58
    赞同 展开评论 打赏
  • 背景信息

    DataWorks的数据开发(DataStudio)面向各引擎(MaxCompute、Hologres、EMR、CDH等)提供可视化开发界面,包括智能代码开发、数据清洗加工、规范化任务开发与发布等,保证数据开发的高效与稳定。更多数据开发模块的使用,详情请参见数据开发概述。

    通常,写入原始业务数据至DataWorks,并加工为最终结果表的过程如下: 在DataWorks创建多个数据表。例如: 源表:存储从其他数据源同步过来的数据。 结果表:存储经DataWorks清洗加工过的数据。

    创建同步任务,将业务数据同步至上述源表。

    创建计算节点,对同步任务产出的表数据进行清洗、逐层加工,并将每层结果写入对应结果表。 您也可以在创建表后,使用直接上传方式,将本地数据上传至DataWorks的源表,再通过计算节点进行清洗加工,将加工后的数据存储至结果表。本文使用直接上传本地数据,并通过计算类型节点清洗该表数据为例进行说明。 进入数据开发 登录DataWorks控制台。 在左侧导航栏,单击工作空间列表。 选择工作空间所在地域后,单击相应工作空间后的数据开发。

    2022-12-13 12:43:07
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多