开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks表怎么提交线上?

DataWorks表怎么提交线上?

展开
收起
真的很搞笑 2023-12-31 08:00:38 40 0
2 条回答
写回答
取消 提交回答
  • 在阿里云DataWorks中,表从开发环境提交到线上生产环境通常涉及以下步骤:

    1. 开发和测试阶段

      • 在开发环境中创建或修改表结构,并进行数据开发和调试。
      • 确保表结构、数据质量和业务逻辑满足上线要求。
    2. 提交表结构

      • 在DataWorks控制台,进入对应的项目和工作空间。
      • 找到你需要上线的表,在表的基本属性中设置好表的相关信息,比如表名、字段定义等。
      • 单击“提交”按钮,将表结构提交到开发环境。
    3. 同步表结构至生产环境

      • 通过DataWorks的数据集成(Data Integration)功能或者数据服务(Data Service)模块创建表结构迁移任务。
      • 指定源为开发环境中的表结构,目标为生产环境的表结构。
      • 配置任务并启动,执行表结构同步。
    4. 数据同步

      • 如果需要同步数据,也需要创建数据迁移或同步任务,确保数据从开发环境准确无误地迁移到生产环境。
      • 根据实际情况配置增量或全量同步策略以及相关的过滤条件和分区规则。
    5. 审批与发布流程

      • 在一些组织中,上线操作可能还需要经过代码审核和权限审批流程,确保变更符合企业内部的管理制度和安全规范。
      • 完成审批后,可以正式触发上线动作,将更改部署到生产环境。
    6. 验证与监控

      • 表结构和数据成功提交到生产环境后,需要对生产环境的表进行验证,确认数据完整性和正确性。
      • 设置相应的监控报警机制,以确保上线后的系统稳定运行。
    2023-12-31 13:44:44
    赞同 展开评论 打赏
  • 网站:http://ixiancheng.cn/ 微信订阅号:小马哥学JAVA

    参考文档:https://help.aliyun.com/zh/dataworks/use-cases/create-tables-and-upload-data
    前提条件
    您在工作空间配置页面添加MaxCompute计算引擎实例后,当前页面才会显示MaxCompute目录。详情请参见创建并管理工作空间。
    背景信息
    表bank_data用于存储业务数据,表result_table用于存储数据分析后产生的结果。
    创建表bank_data
    进入数据开发页面。

    登录DataWorks控制台,单击左侧导航栏的数据建模与开发 > 数据开发,在下拉框中选择对应工作空间后单击进入数据开发。

    在数据开发页面,鼠标悬停至新建图标,单击新建表 > MaxCompute > 表。
    image.png

    2023-12-31 13:06:56
    赞同 1 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks高效数据分析最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多