订阅数据标准变更,随时掌握标准动态,保障您的开发质量!

简介: 小王是一名ETL工程师,面临数据标准频繁变化对规范开发带来的挑战。为帮助小王等开发者解决此类问题,DataphinV4.3版本新增“标准变更订阅”功能,支持便捷高效的配置、多种变更通知项、多渠道通知并提供了清晰可循的推送记录。这个新功能让小王在遵循数据标准的同时也能保证开发响应效率和数据质量,相关业务方和技术负责人都十分满意。

背景

为了进一步提升数据质量,ETL工程师小王所在的部门要求大家开发的核心表必须始终遵循最新的数据标准。标准的变化可能会影响表结构的设计和相关数据处理过程,从而影响表的可用性和数据合规性。


--- “小王!最新的标准规范中“最近 30 天最低客单价”这个字段类型已经改成 Double 了,你怎么还用 Int,我下游计算都报错了,今天报表数据又出不来了!” BI 分析师小美冲小王一通抱怨。

--- 小王小声嘀咕:“也没人告诉我变了啊....”


在快节奏的开发环境下,小王如何即时、低成本又能精准的获知标准更新动态呢?

功能概览

为了帮助小王和同样面对此类挑战的开发人员,4.3版本中我们推出了“标准变更订阅”功能。

1. 多配置入口:提升配置效率

如果您已经知道自己需要遵循哪些数据标准、或者暂时还没有建立字段和标准之间的映射关系,可以选择直接在“数据标准列表”中搜索筛选需要的数据标准后一键批量订阅。针对已经配置过订阅的数据标准,您也可以按需选择处理方式,快速生成订阅任务。

如果您暂时还没有梳理出相关的标准清单,或者只需要订阅与自己负责的核心表相关的数据标准,可以在“个人数据中心-我负责的表”页面直接选择需要保障的核心表,再通过“订阅关联标准变更”功能进行订阅。此时系统将根据已生成的字段和标准的映射关系,自动圈选出相关的数据标准,帮助您精准识别订阅目标。

订阅完成后,您可以在“个人数据中心-我订阅的”列表统一查看和管理您的订阅任务,进行编辑、删除或新增等操作。

2. 多种变更通知项:各种动态一网打尽

支持“数据标准生效、失效、下线、删除”变更订阅,您可以根据需要选择需要发送通知的场景。如:

  • 作为开发者:只需要关心最新生效的标准,选择“生效”场景
  • 作为标准负责人:任何标准变化都需要明确知晓,二话不说全部订阅!
  • 作为标准的相关业务方,需要评估标准变更对自己负责的业务的影响,此时可以选择”生效、失效、下线“场景

3. 多渠道通知:按需选择,保证通知到位

可以根据您的工作场景,可以按需选择站内信、电子邮件、群机器人消息(钉钉/飞书/企微)几种通知方式。

4. 清晰可循的推送记录:先概览、再细查,历史推送也少不了

每条通知概括展示了“标准负责人、变更前后的状态及版本”等信息,并提供了查看标准的链接。您可以通过链接进入标准详情页面,并点击“历史版本对比”了解变更前后的详细差异。

此外,您还可以在“我订阅的列表-推送记录”中查询历史已推送的消息,以跟踪通知历史和响应时间线,差缺补漏。

   

结语

新的一天工作开始了:

“叮!您有一封新的邮件:数据标准“会员渠道”状态已变更...”小王立刻打开电脑,点击链接查看变更详情,按照新规范修改了指标加工口径,并主动同步到小美可能产生的变更影响。

听着小美的夸赞,小王心里别提多开心了。

这个新功能让小王在遵循数据标准的同时也能保证开发响应效率和数据质量,相关业务方和技术负责人都十分满意。

相关文章
|
数据采集 监控 安全
数据标准应用(三):数据标准落标监控-下篇
数据标准创建完成后,需要指定其关联的资产对象才能发挥应用价值。数据标准和资产对象的映射关系通过落标映射规则来管理,对象是否遵循了映射到的标准定义则通过落标监控规则来判断。本文为您介绍落标监控评估的基本概念和监控逻辑。Dataphin 支持通过定义标准属性和资产对象元数据字段之间的匹配关系,自动生成数据标准和资产对象的映射关联;针对已确定的映射关系,可结合数据标准的定义对关联的资产对象进行落标监控,包括元数据监控和内容质量监控。上篇,我们为大家介绍了数据标准监控的分类和配置方式,本期我们将为您介绍配置好的落标监控如何生效以及如何查看监控结果。
1110 0
|
SQL API 数据库
为API设置默认排序规则结果数据的正确性
Dataphin数据服务支持API调用时通过OrderByList自定义排序,确保数据返回符合业务需求。默认排序在API设计时至关重要,因为它影响用户体验、数据一致性及查询正确性。新版本 Dataphin 提供了排序优先级设置,允许在SQL脚本或OrderByList中指定排序,以适应不同场景。
615 0
|
存储 监控 安全
得物 ZooKeeper SLA 也可以 99.99%丨最佳实践
在本文中,作者探讨了ZooKeeper(ZK)的一个内存占用问题,特别是当有大量的Watcher和ZNode时,导致的内存消耗。
44813 129
|
Prometheus 监控 Kubernetes
青团社:亿级灵活用工平台的云原生架构实践
青团社是国内领先的一站式灵活用工招聘服务企业,灵活用工行业的 Top1。青团社于 2013 年在杭州成立,业务已经覆盖全国,在行业深耕 10 年。我的分享将分为以下三部分:青团社架构演进的历程、青团社如何实现云原生、总结与展望。
263206 126
|
Cloud Native 安全 应用服务中间件
云原生网关哪家强:Sealos 网关血泪史
云原生网关哪家强:Sealos 网关血泪史
1022 107
|
数据采集 搜索推荐
标准审批灵活配置助力高效组织流程管理
Dataphin 在 V3.14 版本中对标准审批设置功能进行了全面升级,支持按照标准集粒度对不同数据标准的审批流程进行配置:上线、下线审批可独立配置,支持免审批;此外,Dataphin 支持设置不同模块的审批流程使用的审批系统(内置或第三方审批系统),从而将标准管理流程和且 OA 流程进行更好的结合,助力提升组织流程的管理效率,推动业务发展。
595 1
再见手动编码,标准自动化编码规则来帮忙!
标准管理员小S面临数据标准编码管理的挑战:编码格式不统一、编码值不可读活相关性差,手动管理耗时易出错。Dataphin新推出“标准编码规则”功能,可以实现一次配置批量生成编码,并通过自增序列、固定字符串和所属标准集编码的组合,保证编码相关性和灵活性,同时提供了编码规则变更后的批量订正功能,大大简化管理工作。小S对此表示高度满意。
760 0
|
人工智能 运维 Serverless
30 秒出服装设计稿,森马用函数计算+AIGC 整“新活”!
阿里云函数计算帮助森马应对AI项目初期的决策周期长、自建GPU集群成本高和模型部署难的挑战,通过提供一键部署的Stable Diffusion模型,实现快速的AI推理应用开发和部署。
167323 13
|
数据处理 数据安全/隐私保护
智能推荐映射关系,加速数据标准落地进程
在V4.0版本中,Dataphin推出了智能推荐映射关系功能,用户可以基于内置特征或创建自定义特征,对数据内容进行表示,并将其与数据标准关联,进而智能映射映射关系,尤其在字段分布广泛和命名多变的情况下,可以提高映射的准确性和效率,加速了数据标准实施。
830 0
|
Cloud Native 前端开发 关系型数据库
Ganos实时热力聚合查询能力解析与最佳实践
本文主要介绍Ganos实时热力聚合查询并动态输出热力瓦片能力,依托阿里云PolarDB PostgreSQL产品、ADB PostgreSQL和RDS PostgreSQL 三款数据库建设输出。