治理工作台升级,可手动录入质量问题,实现反馈有渠道、整改可跟踪

简介: Dataphin V4.0版本升级治理工作台,支持手动录入数据质量问题,新增对“标签”对象的问题管理,并且可对问题进行分类。问题清单和整改流程也进行了优化,手动录入的问题和自动识别的问题可统一整改追踪,并提供操作记录,以增强数据质量管理的响应速度和效率。

应用场景

Dataphin 从 V3.10 版本开始支持了治理工作台的功能,针对通过质量规则监控自动识别出来的问题,可以结合整改流程进行问题跟踪和处理,提升了质量管理的规范性。

但是,质量问题的来源往往不止监控规则,例如:

  • 业务分析师在资产目录中找到一张需求分析相关的表,通过“数据探查”功能了解表数据概况,发现其中一个字段的“值分布”存在明显异常,希望能直接快捷地反馈该数据质量问题
  • 质量管理员从数据运营团队收集到一批取数用数过程中遇到的问题,希望能够将这部分问题录入系统,和其他通过质量监控规则自动发现的问题用统一的整改流程来追踪
  • 标签业务员发现自己使用的标签数据已经 1 周没有更新过,需要向标签开发人员反馈该问题,并追踪问题的整改情况

因此,V4.0 版本中,Dataphin 治理工作台再升级,支持手动录入质量问题,并且纳入了“标签”对象的问题管理,更全面地实现反馈有渠道、整改可跟踪。


功能概览

问题反馈更便捷

首先,本期拓展了问题反馈渠道。除了系统通过质量规则监控自动发现问题外,您可以在资产目录或标签市场中浏览资产详情时快速反馈发现的异常问题,也可以在治理工作台中统一批量录入问题,并在问题清单列表中统一查看和管理所有的质量问题,缩短反馈链路。

反馈问题时,您可以上传附件(如数据比对结果、问题录屏等等)作为问题的依据,也可以选择是否提供个人联系方式,便于问题处理人联系您了解更多细节信息。

此外,治理工作台可管理的问题对象除了已经支持的数据表、数据源等,还新增支持了对“标签”类型对象的问题反馈及管理,让标签使用更放心。

问题管理更精细

本次新增支持对质量问题进行分类管理。

针对通过质量规则监控系统发现的问题,会根据“规则类型”自动归属到对应的系统问题类型(如“一致性校验异常”),后续也可以编辑新增其他问题类型。针对手动录入的问题,可以在提出问题时标注问题分类,也可以后续批量管理修改问题所属分类。

系统内置了部分常见的质量问题类型(如:数据不准确、数据产出延迟、数据口径不准确等),开箱即用,也支持自定义新增类型,让问题管理更加便捷。

本次问题清单列表也进行了升级。

首先,我们按照资产类型对问题进行了分类统计,可以快捷查看每种类型下已提出的和待处理的问题总数。其次,每个资产类型对应一份问题清单列表,支持按照问题对象名称进行搜索,也可以按照问题分类、提出方式/提出人等进行进一步筛选,提升查找问题效率。您可以在列表查看问题的基本信息、当前的处理状态、关联的整改流程和问题负责人等,还可以根据需要查看的信息项自定义配置展示列,使用体验更友好。

整改流程更完善

针对本期新增的手动录入的问题,您可以进行:标记为已处理、打回重新处理、忽略异常、转交问题负责人等操作,并且可以将手动问题和系统自动识别问题一并加入整改流程进行统一整改追踪。发起整改时,您可以选择已有的整改流程,也可以快速创建新的流程,大大提升了操作灵活性。

针对单个问题和整改流程的每一次操作都会被记录为清晰可循的操作记录,您可以通过记录完整跟踪每个问题的处理节点。

结语

通过治理工作台集中管控和处理系统自动检测及手动录入的质量问题,能更大程度上确保问题被有效追踪和及时整改,提升整体数据质量管理的响应速度和维护效率,为您的数据治理提供更有力的支撑。

相关文章
|
数据采集 监控 安全
数据标准应用(三):数据标准落标监控-下篇
数据标准创建完成后,需要指定其关联的资产对象才能发挥应用价值。数据标准和资产对象的映射关系通过落标映射规则来管理,对象是否遵循了映射到的标准定义则通过落标监控规则来判断。本文为您介绍落标监控评估的基本概念和监控逻辑。Dataphin 支持通过定义标准属性和资产对象元数据字段之间的匹配关系,自动生成数据标准和资产对象的映射关联;针对已确定的映射关系,可结合数据标准的定义对关联的资产对象进行落标监控,包括元数据监控和内容质量监控。上篇,我们为大家介绍了数据标准监控的分类和配置方式,本期我们将为您介绍配置好的落标监控如何生效以及如何查看监控结果。
1130 0
|
10月前
|
SQL 数据可视化 大数据
Dataphin数据血缘:实现全面追溯,保障流转透明
数据血缘揭示数据从源头到应用的全链路流转关系,助力企业厘清数据来源、影响范围与质量问题根源。Dataphin通过自动采集、手动配置和OpenAPI注册三类方式构建全面的数据血缘,支持可视化展示与用于质量问题溯源,实现数据可查、可信、可管,推动高质量数据治理。
1143 1
|
搜索推荐 数据管理
Dataphin功能Tips系列(70)自定义菜单:构建一站式数据管理平台
Dataphin通过自定义菜单功能,支持嵌入企业其他平台URL,实现统一的数据开发与管理平台,提升团队协作效率。
362 8
|
12月前
|
数据采集 SQL 数据可视化
Dataphin功能Tips系列(72)一键数据探查,打造高质量数据开发、分析流程
在数据开发与分析前期,掌握数据质量与分布情况至关重要。Dataphin提供高效的数据探查功能,支持手动与自动探查方式,一键生成数据质量报告,帮助用户快速发现空值、异常值、重复值等问题,提升数据准备与分析准确性。
369 0
|
SQL API 数据库
为API设置默认排序规则结果数据的正确性
Dataphin数据服务支持API调用时通过OrderByList自定义排序,确保数据返回符合业务需求。默认排序在API设计时至关重要,因为它影响用户体验、数据一致性及查询正确性。新版本 Dataphin 提供了排序优先级设置,允许在SQL脚本或OrderByList中指定排序,以适应不同场景。
626 0
|
数据采集 SQL 机器学习/深度学习
Dataphin数据治理系列:基于数据质量管理,支撑业务快速发展
数据质量是数据建设和管理中非常重要的一环。所有的数据应用,不论是用于支持业务开展的数据库,还是用于支持商业决策,或者用于机器学习和人工智能等高级应用,实现数据价值的前提是数据本身是高质量的,是可靠和可信的。
Dataphin数据治理系列:基于数据质量管理,支撑业务快速发展
|
Cloud Native 前端开发 关系型数据库
Ganos实时热力聚合查询能力解析与最佳实践
本文主要介绍Ganos实时热力聚合查询并动态输出热力瓦片能力,依托阿里云PolarDB PostgreSQL产品、ADB PostgreSQL和RDS PostgreSQL 三款数据库建设输出。
再见手动编码,标准自动化编码规则来帮忙!
标准管理员小S面临数据标准编码管理的挑战:编码格式不统一、编码值不可读活相关性差,手动管理耗时易出错。Dataphin新推出“标准编码规则”功能,可以实现一次配置批量生成编码,并通过自增序列、固定字符串和所属标准集编码的组合,保证编码相关性和灵活性,同时提供了编码规则变更后的批量订正功能,大大简化管理工作。小S对此表示高度满意。
771 0
|
Shell 网络安全 Python
妙用Dataphin的Python三方包管理
Dataphin 中的 Python 计算任务不随意增加内置 module 是为了避免安装包过大和升级时间延长。用户可通过执行 "pip list" 或 "pip3 list" 查看内置 module 列表。 Dataphin 的 Python 环境在镜像中固定,无法用户直接修改,但 v3.14 版本起支持在线安装或上传安装三方包,预安装后在任务中显式引入。对于依赖操作系统库的 module,用户需上传包含相应程序的自定义安装包进行预安装。此外,此功能也可扩展用于管理 shell 任务所需的系统程序。
651 0
|
数据采集 搜索推荐
标准审批灵活配置助力高效组织流程管理
Dataphin 在 V3.14 版本中对标准审批设置功能进行了全面升级,支持按照标准集粒度对不同数据标准的审批流程进行配置:上线、下线审批可独立配置,支持免审批;此外,Dataphin 支持设置不同模块的审批流程使用的审批系统(内置或第三方审批系统),从而将标准管理流程和且 OA 流程进行更好的结合,助力提升组织流程的管理效率,推动业务发展。
614 1