开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks从创建文件-提交发布-部署后,怎么样的流程才能做到以上的数据返回呢?

dataworks从创建文件-提交发布-部署后,怎么样的流程才能做到以上的数据返回呢?

展开
收起
真的很搞笑 2024-01-07 17:06:09 56 0
3 条回答
写回答
取消 提交回答
  • DataWorks从创建文件、提交发布、部署后,可以通过以下流程实现数据返回:

    1. 创建文件:在DataWorks控制台中创建一个任务,选择相应的开发语言和运行环境。然后编写代码并保存到本地文件中。

    2. 提交发布:将本地文件上传到DataWorks控制台指定的存储桶中。然后通过DataWorks控制台的发布功能,将任务发布到生产环境中。

    3. 部署:在生产环境中部署任务,包括配置任务参数、设置任务依赖关系等。部署完成后,任务就可以开始执行了。

    4. 数据返回:任务执行完成后,可以将结果写入到指定的输出表中。DataWorks会自动将输出表的数据同步到指定的数据源中,从而实现数据的返回。

    需要注意的是,具体的流程可能会因为不同的任务类型和需求而有所不同。建议参考DataWorks官方文档或咨询相关技术支持人员以获取更详细的信息。

    2024-01-09 10:54:51
    赞同 展开评论 打赏
  • 可以先通过这个api获取一下 https://help.aliyun.com/zh/dataworks/developer-reference/api-listinstances?spm=a2c4g.11186623.0.i1 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-01-07 18:37:19
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在DataWorks中,从创建文件到提交发布再到部署后,可以通过以下流程实现数据返回:

    1. 创建文件:在DataWorks中创建一个SQL脚本文件或者Shell脚本文件,编写相应的数据处理逻辑。

    2. 提交发布:将创建的文件提交到DataWorks的代码仓库中,并设置相应的触发条件(如定时触发、手动触发等)。

    3. 部署:在DataWorks中创建一个任务,选择刚刚提交的代码仓库中的文件作为任务的处理逻辑,并进行相应的配置,如输入输出参数、调度时间等。然后点击部署按钮,将任务部署到指定的计算资源上。

    4. 运行任务:部署完成后,任务会根据设定的调度时间自动运行,或者手动触发任务运行。任务运行时会按照脚本文件中的逻辑对数据进行处理,并将处理结果返回。

    5. 查看结果:在DataWorks的任务列表中可以查看到刚刚运行的任务的状态和结果。如果任务成功运行,可以查看到处理后的数据结果。

    通过以上流程,可以实现在DataWorks中创建文件、提交发布、部署后进行数据处理并返回结果的功能。

    2024-01-07 17:09:10
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载