开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks就是这个连接数,这个任务运行起来就默认占了9个连接吗?不管连接是否活跃?

DataWorks就是这个连接数,这个任务运行起来就默认占了9个连接吗?不管连接是否活跃?image.png

展开
收起
真的很搞笑 2023-12-10 19:16:22 45 0
3 条回答
写回答
取消 提交回答
  • 在 DataWorks 中,任务的连接数与任务所需的资源和并发度相关,而不是默认占用固定数量的连接。

    连接数的分配取决于您在 DataWorks 中配置的任务属性和环境的设置。当您创建一个任务时,可以根据任务的性质和需求来设置连接数以及其他相关资源参数。

    然而,请注意以下几点:

    1. 连接数的具体分配方式可以因不同的计算引擎或数据存储类型而有所不同。例如,对于某些数据库或计算引擎,可能会根据任务的并发度和数据处理量来动态分配连接数。

    2. 在任务运行期间,如果连接处于非活跃状态(即没有正在使用的连接),系统可能会自动释放这些非活跃连接,以提供更多可用的连接给其他任务使用。

    3. 如果任务需要更多的连接数以支持高并发或大规模数据处理,您可以相应地调整任务属性或与管理员协商以获取更多资源。请注意,增加连接数可能会带来额外的资源消耗和性能影响,因此应谨慎评估并根据实际需求进行设置。

    2023-12-11 21:14:28
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    DataWorks任务运行所占用的资源,包括数据库连接数等,是可以调整的。默认情况下,数据集成提供了数据库最大连接数、并发数等配置的默认值。这些配置项可以帮助你优化任务的性能和效率。

    关于你的疑问,当任务开始运行时,确实会默认占用一些资源,但是否占用9个连接以及这些连接在何种情况下被视为活跃,需要具体查看任务的配置信息和日志输出。任务运行在哪个资源组上,可以通过查看任务运行日志来确认。如果发现资源使用过多或者不合理,可以根据业务需求对任务进行精细化配置。

    同时,需要注意的是,DataWorks是根据你使用的资源进行收费的,这些资源包括数据集成同步任务执行资源和调度系统资源。因此,合理配置并优化任务的资源使用,不仅可以提高任务性能,还可以降低费用。

    2023-12-11 11:18:03
    赞同 展开评论 打赏
  • 2023-12-11 10:31:01
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载