开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中运维大盘的数据同步节点的计算时间是不是把以前的等待资源时间给去掉了?

DataWorks中运维大盘的数据同步节点的计算时间是不是把以前的等待资源时间给去掉了image.png 以前是包含等待集成资源/调度资源,今天看是不包含等待集成资源/调度资源,image.png 这是top,正常需要10分钟+,包含等待资源,以前不是的,会有很多时间

展开
收起
cuicuicuic 2023-06-26 13:58:19 44 0
2 条回答
写回答
取消 提交回答
  • 在DataWorks中,运维大盘的数据同步节点通常会根据任务的执行情况计算节点的时间。具体来说,节点的计算时间通常包括以下几个部分:

    任务执行时间:这是指节点从开始执行到完成所需的时间。这个时间通常是根据节点的实际执行情况来计算的,包括任务的类型、数据量、计算资源等因素。 资源等待时间:这是指节点在等待资源可用时所花费的时间。例如,当节点需要等待计算的资源(如CPU、内存等)可用时,这个时间会被计算在内。 其他时间:这包括节点在等待其他任务完成或等待数据传输等方面所花费的时间。 在DataWorks中,运维大盘的数据同步节点通常会显示节点的计算时间,这个时间会包括任务执行时间和资源等待时间等所有时间。因此,节点的计算时间并不会去除以前的等待资源时间。

    需要注意的是,具体的计算方式可能会因DataWorks版本和配置而有所不同,因此具体的计算时间可能会有所差异。如果您对节点的计算时间有疑问,建议查看节点的详细信息或咨询DataWorks的技术支持人员。

    2023-06-26 20:50:06
    赞同 展开评论 打赏
  • 运维大屏 数据集成 没有变动过 是说这里的运行时长没有包含等待集成资源/调度资源的时间吗?运维概览里有等待调度资源 ,数据集成里是没有的 这块应该很久没动过了 有截图可以看看吗,这里是执行时长 计算的是获取到集成资源后 开始执行的耗时 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-06-26 14:03:55
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks全链路数据质量解决方案-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载