开发者学堂课程【DataWorks 一站式大数据开发治理平台精品课程:11.DataWorks 数据治理介绍和实践】与课程紧密联系,让用户快速学习知识
课程地址:https://developer.aliyun.com/learning/course/81/detail/1237
11.DataWorks 数据治理介绍和实践(二)
四、产品最近进展
1、DataWorks 数据综合治理-全新版本
覆盖数据汇聚、加工、使用的全链路,面向数据管理、数据生产和数据消费的不同视角,提供一站式体系化的治理能力。首先推出全新改版的数据综合治理,在新版本中通过对数据生产,数据使用和数据管理三个视角的抽象,能够让更聚焦的关注和使用不同视角下所需要使用的产品功能。在新版本中,提示一系列新的产品能力。
2、DataWorks 数据综合治理-全新版本核心功能速递
覆盖数据汇聚、加工、使用的全链路,面向数据管理、数据生产和数据消费的不同视角,提供一站式体系化的治理能力。
(1)统一元数据管理
- 高扩展的统一元数据采集和管理,支持MaxC、EMR、Hologres、 ADB、RDS等11种数据源。
- 全链路数据血缘大图和影响分析。
- 表名、字段名、描述等多因素高级检索能力。
(2)数据安全管理
- 数据分类分级行业模板,敏感数据识别能力增强
- 基于数字水印的数据泄露溯源功能
- 数安链:基于区块链的数据流转安全产品,数据流转,控制权不流转
(3)运维监控管理
- 新增移动运维,支持在移动端灵活处置运维告警
- 新增电话告警,支持短信、邮件、钉钉和电话等多种告警方式
- 新版监控大盘,提供全局查看视角
(4)数据质量管理
- 动态监控阈值,自定义模板功能
- 稳定性治理事件管理, PDCA机制,治理闭环*
(5)成本优化管理
- 计算任务、数据存储、数据同步三个维度优化治理。
- 健康分(阿里巴巴最佳实践), 运营落地机制。
(6)开放&生态
- 元数据API开放(企业版)获取额外的自定义信息。
- 生态合作:一体化联合解决方案
3、生态合作: DataWorks + Datablau 数据中台模型管理平台
DataWorks + Datablau,提供的数据中台模型管理平台研究联合解决方案。
4、生态合作: DataWorks + DGOffice 一体化数据治理解决方案
DataWorks +御数坊,DGOffice 形成一体化数据治理解决方案,以“咨询+产品'的模式为客户提供全栈咨询服务,面向数据全生命周期开展全方位治理工作。治理是有非常强的行业属性的,只有在行业中摸爬滚很多年后,沉淀下来的才是行业中是最需要的能力。所以 DGOffice 在这方面哈跟 DataWorks 相当于是提供一条非常互补的组合能力,这于御数坊的创始人刘晨老师也是在数据管理领域中非常资深的专家,是国内数据治理和管理工作,开展人和领路人之一,DataWorks 在建成数据期间的过程中,也在持续向合作伙伴和向客户学习。
五、总结
1、数据治理是数据管理的核心组成部分,是数据管理过程中的流程和工具支撑
2、企业在数字化转型的不同阶段,数据治理的需求层次存在区别。
3、统一的开发&治理平台,减少重复工作并提供高扩展性。
4、治理对象是数据和产出数据的任务,用平台、工具服务好人。
5、基于数据治理数据的理念。
6、平台和引擎的技术演进是治理落地的催化剂。平台技术和引擎的技术演进,尤其是 maxcompute 的底层引擎技术演进是治理落地的催化剂,就是底层引擎在后台做非常多的优化的工作,它对于的治理对于的成本优化是非常有大的帮助的。
7、dataworks 合作伙伴以及在API方面提供很好的开放性,开放和生态合作。如果有自定义资源方面的需求,可以通过的API获取到自己的相应的数据进行自定义。