开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks数据质量功能里需要怎么配置分区表达式来实现对每个二级分区进行DQC校验呢?

DataWorks数据质量功能里,对表配置DQC监控,如果表的一级分区是yyyymmdd,二级分区是不确定的字符,要求匹配全字符,需要怎么配置分区表达式来实现对每个二级分区进行DQC校验呢,规则里面自定义sql的话,一级分区用参数 dt='$[yyyymmdd-1]' 可以引用到业务日期,但是二级分区怎么写才能引用到参数呢?image.png
image.png

展开
收起
真的很搞笑 2024-06-17 15:34:31 26 0
1 条回答
写回答
取消 提交回答
  • 二级分区也可以配置 dt=$[yyyymmdd]/hh=$[hh24miss-1/24] 类似这样 但是还不支持正则表达式哈
    1级分区名=分区值/2级分区名=分区值/N级分区名=分区值,您可以试一下 二级分区先配置=abc,然后在自定义sql里 指定where 条件来确定实际要校验的分区范围 可以先尝试一下image.png
    ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-06-17 19:58:28
    赞同 1 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载