开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中,如何自动提交创建实例?

DataWorks中,如何自动提交创建实例?

展开
收起
真的很搞笑 2023-12-31 08:34:35 73 0
4 条回答
写回答
取消 提交回答
  • DataWorks确实没有自动提交创建实例的功能,需要用户手动在DataWorks后台中提交和发布。在创建文件成功后,您可以通过调用相应的部署文件接口来部署应用程序或作业。

    通常,创建实例的过程包括以下步骤:

    1. 在DataWorks中创建一个项目,并为其配置相应的存储和计算资源。
    2. 在项目中创建一个作业或应用程序,并为其配置所需的输入和输出数据源。
    3. 在作业或应用程序中编写相应的代码或配置相应的任务逻辑。
    4. 构建和打包应用程序或作业。
    5. 在DataWorks后台中手动提交和发布应用程序或作业的部署文件。
    6. 根据需要,通过调用部署文件接口来启动或停止应用程序或作业的实例。
    2023-12-31 17:42:41
    赞同 1 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在DataWorks中,创建实例后是否需要手动提交取决于您的需求。如果您的任务需要手动触发执行,而无需设置自动调度,那么您可以选择新建手动任务。对于手动任务,您需要在生产环境运维中心管理手动任务。此外,DataWorks提供了周期业务流程和手动业务流程两种,以满足需要周期性调度和无需周期性调度手动触发运行的场景。

    一旦您的文件创建成功,您就可以调用部署文件接口。具体来说,首先调用CreateFile在数据开发中创建一个文件。然后,通过DeployFile接口返回的Data参数继续调用GetDeployment接口,轮询被触发的异步发布流程的状态。若项目空间是简单模式,则不区分生产和开发环境,只需要调用提交接口即可。这样一来,您就可以顺利进行文件的创建并在创建成功后进行部署了。

    2023-12-31 12:08:02
    赞同 展开评论 打赏
  • 在阿里云DataWorks中,任务的创建和实例生成通常是两个不同的操作步骤。具体的工作流程如下:

    1. 创建数据开发任务(如SQL、脚本、数据同步等)并配置相应的属性,包括但不限于调度周期、依赖关系、参数等。

    2. 完成任务开发后,需要将任务提交至开发环境或测试环境进行调试运行,确保任务逻辑正确无误。

    3. 在开发环境验证通过后,具备相应权限的角色(运维、部署或空间管理员等)可以将任务发布到生产环境。这个过程一般涉及到手动操作,即点击页面上的“发布”按钮,然后在创建发布包的过程中选择要发布的任务,并确认相关配置。

    4. 发布到生产环境后,根据您在节点调度配置时设定的实例生成方式,系统会按照预设的时间策略来生成实例。如果设置为“发布后即时生成”,并且满足发布时间的条件(比如不在全量转实例的特定时间段内),那么系统将会自动为您生成实例并开始执行。

    5. 通常情况下,从任务创建到实际运行是自动化的过程,但关键的环境切换与发布动作需要人工介入以确保数据安全和业务流程可控。

    至于调用部署文件接口,这通常指的是API级别的操作,如果您希望通过编程的方式来实现自动化部署,可以通过调用DataWorks提供的API接口来完成任务的发布或者触发实例生成。然而,常规的操作是在DataWorks控制台界面内完成上述操作。

    2023-12-31 11:04:07
    赞同 展开评论 打赏
  • 标准模式流程:submitfile - getdeployment - deployfile - getdeployment
    deletefile - getdeployment - deployfile - getdeployment ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-12-31 11:01:37
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多