带你读《构建企业级好数据(Dataphin智能数据建设与治理白皮书)》——(三)资产治理:标准、质量、安全、资源(5)

本文涉及的产品
智能数据建设与治理Dataphin,200数据处理单元
简介: 带你读《构建企业级好数据(Dataphin智能数据建设与治理白皮书)》——(三)资产治理:标准、质量、安全、资源(5)

2) 质量规则模版

Dataphin 数据质量,支持对数据行完整性、一性、及时性、有性、一致性、性、自SQL 7 质量模版24 个模版100+不同指标的质量规则验,7 质量模版类介绍下:


image.png


注意这里对模版的整体能力进说明一个有更多的模版和应用场景,详见 Dataphin 产品


3) 产品能力展示


image.png


a) 质量大盘


质量可以示当验规则情况情况,有助于管理员快速发现整题,安排排务。


b) 模版管理


模版管理可以查看质量当前所有的模版信息


模版为系统内模版和自定义模版,系统模版,可以创建质量规则。组织内有通用求(性、务数据准确性等),可以沉淀为通用的模版,于业务质量规则的建。


c) 质量规则


支持质量、数据源)配置质量规则,并设置告警阈值和规则强配置调可以数据更新来自发质量的务,完成后后生成质量,并情况完成作。


d) 校验记录


记录可以查看次校验规则行的具体果和,是天检查数据质量和处理质量题最常用入口Dataphin 质量的记录次质量规验的时状态便误排


e) 数据源管理


数据源要进行数据质量检测务外,还要进的业务支撑。为了止数据质量响到业务,支持个数据源支持的最质量并行度控制,当达质量最并行度时,新度的质量规则会进入排队状态,以保护业务的正常开展

目录
打赏
0
0
0
0
82
分享
相关文章
Dataphin功能Tips系列(53)-离线集成任务如何合理配置JVM资源
本文探讨了将MySQL数据同步至Hive时出现OOM问题的解决方案。
Dataphin功能Tips系列(56)如何实现质量规则的批量修改
本文介绍了在Dataphin中针对Dataphin表和全域数据表的自定义SQL规则的批量修改的方法。
|
13天前
Dataphin功能Tips系列(54)如何将资产自动变更为暂不上架
在资产运营管理中,为避免某些表(如贴源表、中间表等)被自动上架,Dataphin 提供了“暂不上架”规则配置功能。通过创建规则组和规则,可精细化管理资产对象。
产品评测|从数据标准到实时监控,深度解析Dataphin如何以智能提效与安全合规驱动企业数据价值释放
Dataphin是阿里巴巴基于OneData方法论打造的一站式数据治理与建设平台,帮助企业实现数据全生命周期管理。本文详细记录了使用Dataphin搭建离线数仓的全流程,包括环境准备、数仓规划、数据引入、处理、周期任务补数据、数据验证与分析等环节。体验中发现其离线管道任务、周期调度、补数据功能便捷高效,但也存在系统稳定性不足、文档更新滞后等问题。建议增强对JSON文件支持、优化资源推荐机制并完善脱敏操作功能,进一步提升用户体验。
【产品升级】Dataphin V4.4重磅发布:开发运维提效、指标全生命周期管理、智能元数据生成再升级
Dataphin V4.4版本引入了多项核心升级,包括级联发布、元数据采集扩展、数据源指标上架、自定义属性管理等功能,大幅提升数据处理与资产管理效率。此外,还支持Hadoop集群管理、跨Schema数据读取、实时集成目标端支持Hudi及MaxCompute delta等技术,进一步优化用户体验。
626 3
【产品升级】Dataphin V4.4重磅发布:开发运维提效、指标全生命周期管理、智能元数据生成再升级
【产品升级】Dataphin V4.3重大升级:AI“弄潮儿”,数据资产智能化
DataAgent如何助理业务和研发成为业务参谋?如何快速低成本的创建行业数据分类标准?如何管控数据源表的访问权限?如何满足企业安全审计需求?
1383 4
【产品升级】Dataphin V4.3重大升级:AI“弄潮儿”,数据资产智能化
【荣誉奖项】荣获2024数据治理优秀产品!瓴羊Dataphin联合DAMA发布数据管理技能认证
瓴羊Dataphin连续俩年获得DAMA年度优秀数据治理产品奖,本次与DAMA联合发布“DAMA x 瓴羊 数据管理技能认证”,助力提升全民数据素养。
349 0
【荣誉奖项】荣获2024数据治理优秀产品!瓴羊Dataphin联合DAMA发布数据管理技能认证
如何在Dataphin中构建Flink+Paimon流式湖仓方案
当前大数据处理工业界非常重要的一个大趋势是一体化,尤其是湖仓一体架构。与过去分散的数据仓库和数据湖不同,湖仓一体架构通过将数据存储和处理融为一体,不仅提升了数据访问速度和处理效率,还简化了数据管理流程,降低了资源成本。企业可以更轻松地实现数据治理和分析,从而快速决策。paimon是国内开源的,也是最年轻的成员。 本文主要演示如何在 Dataphin 产品中构建 Flink+Paimon 的流式湖仓方案。
8111 10
如何在Dataphin中构建Flink+Paimon流式湖仓方案

热门文章

最新文章

相关产品

  • 智能数据建设与治理 Dataphin
  • AI助理

    你好,我是AI助理

    可以解答问题、推荐解决方案等