开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks共享调度资源 从8点多一直100%吗?

DataWorks共享调度资源 从8点多一直100%吗?

展开
收起
真的很搞笑 2023-10-10 17:58:46 53 0
3 条回答
写回答
取消 提交回答
  • 根据您提供的信息,DataWorks在每天0点~9点是DataWorks所有租户的任务高峰期,如果工作空间下该时间段执行的任务数较多,建议您使用独享资源组。独享资源组的使用详情可参考文档:新增和使用独享调度资源……(搜索结果收录于2023年8月1日)。因此,如果您需要在高峰期使用调度资源,可能会出现100%的使用率。

    2023-10-13 15:48:27
    赞同 展开评论 打赏
  • 在DataWorks中,共享调度资源的使用率从早上8点开始一直保持在100%是不正常的情况。

    共享调度资源的使用率表示共享调度资源池中正在使用的资源比例。如果使用率一直保持在100%,说明调度资源池中的资源已经全部被占用,可能存在以下几种情况:

    1. 任务过多:如果有大量的任务同时提交或并发执行,可能会导致调度资源池饱和,从而使使用率达到100%。您可以检查是否有过多的任务在同一时间段提交或执行,并考虑优化调度策略、任务间隔等来避免资源竞争。

    2. 资源配额不足:共享调度资源池的资源配额可能不足以满足当前任务的需求。您可以检查工作空间的资源配额设置,并根据实际需求进行调整。

    3. 性能问题:某些任务可能存在性能问题,导致任务运行时间过长,占用了较多的调度资源。您可以对任务进行性能分析和优化,提高任务的执行效率。

    4. 系统故障:在某些情况下,100%的使用率可能是由于系统故障或异常引起的。您可以联系DataWorks的技术支持团队,报告问题并获取更详细的解决方案。

    2023-10-11 14:54:00
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    如果 DataWorks 共享调度资源从 8 点多一直 100%,可能是由于以下几个原因:

    1. 资源不足:如果 DataWorks 共享调度资源不足,可能会导致任务执行缓慢,甚至无法执行。可以尝试增加资源,如增加机器数量、增加内存、增加 CPU 核心数等。
    2. 任务过多:如果 DataWorks 中的任务过多,可能会导致共享调度资源无法充分利用,从而影响任务执行效率。可以尝试优化任务,如减少任务数量、优化任务执行计划、优化任务代码等。
    3. 数据量过大:如果 DataWorks 中的数据量过大,可能会导致任务执行缓慢,甚至无法执行。可以尝试优化数据,如减少数据量、优化数据处理算法等。
    4. 系统问题:如果 DataWorks 系统出现故障或异常,可能会导致任务执行缓慢,甚至无法执行。可以尝试重启 DataWorks 系统,或者联系技术支持进行处理。
    2023-10-10 23:00:32
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多