用得好的数据才是资产,当数据资产遇上知识图谱(1)

本文涉及的产品
数据管理 DMS,安全协同 3个实例 3个月
推荐场景:
学生管理系统数据库
简介: 用得好的数据才是资产,当数据资产遇上知识图谱

image.png


01 什么是E-R图

E-R图(Entity Relationship Diagram)也称实体关系图,是一种用来描述实体、属性和关系的模型。我们常用矩形来表示现实中客观存在且相互区别的实体,用椭圆来表示实体具有的某一特征,用菱形来表示实体和实体间一对一,一对多和多对多的关系。假如现在回到我们大学的数据库课堂上,那么你一定不会对下面这个图感到陌生。

image.png

E-R图一般是用数据库外键来存储和维护这个关系。但是随着业务规模增大和数据量增长后外键性能的降低,越来越多的应用系统在设计时不再使用外键而通过业务代码来保障业务之间的依赖关系,从而导致不易通过外键信息查看到数据中的逻辑关系。


02 我们看到的E-R居然不一样

现在有一个数据库叫DMS_META,打开一个我们常用的数据库管理软件可以查看一下对应的E-R图。如下图所示,表在渲染的同时展示出了表与表之间的外键引用关系。

image.png

但当我们打开DMS查看对应E-R关系时,发现渲染出来的关系会更加丰富。跟之前的看到的E-R完全不一样。

image.png


03 DMS增强E-R做了什么

DMS的E-R图为什么会不一样?DMS对DMS_META这个库都做了哪些操作?增强了哪些能力?


3.1 传统E-R能力

我们使用DMS的表结构设计创建了4个会员表huiyuan_t1(简称t1表),huiyuan_t2(简称t2表),huiyuan_t3(简称t3表),huiyuan_t4(简称t4表),同时创建一个外键表huiyuan_fk(简称fk表),该表和t1表有外键引用关系。同时使用DMS的测试数据构建能力为这些表插入对应的测试数据。

待数据资产图谱构建完成后,回到DMS上查看对应的增强E-R图,可以查看到物理外键间的关联关系。

image.png

同时也可以点击“节点”和“边”查看对应的表详情和关联关系详情。

image.png

image.png


3.2 列算子血缘解析E-R能力

列算子血缘解析E-R是基于DMS自研的列算子血缘解析器的能力构建,DMS每天将通过SQL窗口和数据库开发工单中的所有SQL进行列算子血缘解析,并将经过列算子血缘解析后的字段之间的关联、依赖及影响关系纳入增强E-R图谱。

接下来我们在SQL窗口(也可以通过数据库开发中的变更工单)上模拟一些真实场景的数据库操作。分别使用t1表和t3表的user_id做一次关联生成一个宽表huiyuan_join(简称join表),使用t4表做一次数据过滤生成一个新的新表huiyuan_depend(简称depend表),使用t2表和t3表进行一定的过滤并关联起来生成一张新表huiyuan_influ(简称influ表)。

image.png

通过以上3条SQL模拟了DMS上一般用户的常见查询操作。待数据资产图谱构建完成后,回到DMS上查看对应的增强E-R图,可以看到,除了传统的物理外键外,字段关联字段,字段依赖字段,字段影响字段的关联关系也体现到了增强E-R图中。

image.png

目录
相关文章
|
6月前
|
数据采集 存储 监控
一个平台搞定数据治理,让数据资产发挥价值
本文将为大家解析如何通过袋鼠云数据治理中心进行企业数据多维度治理,实现数据资产的最大化利用和价值发挥。
61 0
|
3天前
|
存储 数据挖掘 大数据
数据要素&数据资产化资料下载
数据要素&数据资产化资料下载
|
3天前
|
数据采集 存储 安全
数据资产新规!《关于加强数据资产管理的指导意见》发布(附全文)
数据资产新规!《关于加强数据资产管理的指导意见》发布(附全文)
116 0
|
3天前
|
数据采集 存储 SQL
数据资产入表在即,企业如何把握机遇,进行数据资产管理?
数据资产入表在即,对于企业而言,如何在充满机遇的环境下调整策略、适应变化,成为了焦点问题。数据资产入表,离不开前期扎实的数据治理准备,那么究竟应然如何实现数据资产的规范化管理?本文告诉你答案。
144 0
|
6月前
|
SQL 数据采集 调度
用得好的数据才是资产,当数据资产遇上知识图谱(2)
用得好的数据才是资产,当数据资产遇上知识图谱
56 0
用得好的数据才是资产,当数据资产遇上知识图谱(2)
|
SQL 数据采集 数据可视化
|
存储 数据采集 搜索推荐
知识︱大数据时代的数据资产管理
伴随着大数据时代的悄然来临,对数据的重视提到了前所未有的高度。
个人号码资产化趋势背后 通信安全的商业价值几何?
个人号码资产化趋势背后 通信安全的商业价值几何?
个人号码资产化趋势背后 通信安全的商业价值几何?
|
数据采集 搜索推荐 大数据
带你读《数据资产》第三章数据资产是新的资产类别3.4 数据资产的六大类难题
《数据资产》第三章数据资产是新的资产类别3.4 数据资产的六大类难题
|
数据采集 人工智能 分布式计算
【话题】企业的数据资产管理
关注公众号“达摩院首座”,了解开发者最真实生活
265 1
【话题】企业的数据资产管理