开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中DI同步任务一直显示DQC 检查未通过?

DataWorks中DI同步任务一直显示DQC 检查未通过?image.png
这个应该不是数据问题吧,数据产出不符合?那这个要怎么改。给logview给你可以?

展开
收起
真的很搞笑 2023-09-25 09:35:17 94 0
2 条回答
写回答
取消 提交回答
  • 点开数据质量日志看下具体是哪条不通过。然后修正数据,是数据产出不符合配置的dqc规则预期,这个dqc规则是用户自定义配置的 可以在数据质量界面找一下这个规则 然后看下数据集成同步任务这次写入的数据是否符合规则 ;如果是规则本身配置有问题 就修改规则,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-09-25 14:33:07
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在DataWorks中,DI同步任务显示DQC检查未通过可能有多种原因。下面是一些常见的原因和解决方法:

    1. 数据质量规则配置错误:DI同步任务执行过程中,会进行数据质量检查(DQC)。如果DQC检查未通过,可能是因为数据质量规则配置不正确。你可以检查DI同步任务的数据质量规则设置,确保规则适用于目标表和字段,并且规则条件正确。

    2. 数据源数据不符合质量规则:DQC检查未通过也可能是因为源数据不符合所设定的数据质量规则。你可以检查源数据是否满足要求,并根据需要对数据进行清洗或转换,以使其符合质量规则的要求。

    3. 数据质量规则的阈值设置过严:有时候,设置的数据质量规则的阈值过于严格,导致大量的数据无法通过DQC检查。你可以重新评估规则的阈值设置,确保规则能够准确反映目标表的合理数据范围,并调整规则的阈值。

    4. 网络或环境问题:有时候,DQC检查未通过可能是由于网络或环境问题导致的。你可以检查网络连接是否正常,并确保DataWorks所运行的环境能够正常访问和读取源数据。

    2023-09-25 14:11:49
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多