EMC首席数据治理官:“受托人”是数据湖问责的关键

简介:

据EMC公司自己的首席数据治理官Barbara Latulippe称,今天的首席数据官(CDO)想要成功的话就需要得到高级管理层的认可和接受。今年在美国麻省理工学院举行的首席数据官CDO论坛上,Latulippe分享了促进数据所有权和数据访问的最佳实践,以及EMC在数据湖方面尝试的方法。

治理当前的数据湖

治理是Latulippe第一个详细谈到的问题,她把自己团队在数据管理方面的逐步成熟归功于EMC公司的历史。给标记和编目数据湖中的数据创建一个框架,这是数据治理的第一步。

所幸的是,Latulippe的团队"非常热衷于元数据",并将他们的热情传递给了使用EMC工具管理数据湖的EMC客户。Latulippe解释说,EMC根据企业使用数据湖中数据的方式,有效地交叉分类了信息,并遵循他们的正式流程以便进行恰当的编目。他还指出,技术IT团队在发挥配置经验方面扮演重要角色,而且也为数据治理和数据所有权做出了贡献。

谁拥有数据?

事实上,数据所有权是Latulippe谈话中另外一个重要的主题,因为这涉及到对管理和使用数据湖的那些人的问责。当被问及谁拥有数据的问题时,Latulippe回答说,应该是企业拥有数据。

"除了治理,我会说我们还专注于数据质量和数据所有权,我们正在实现数据管理员的移动性……转向信息价值,甚至是重新塑造首席信息官。我们有数据治理官,但实际的操作仍然是在企业中。我们让合适的人来帮助业务。"

数据价值几何?

从数据治理到所有权,数据湖最终必须是一个有价值的商业投资。这是Latulippe的团队涉足的另一个领域,她负责数据的编目和可移动性。在这个方面,她的团队正在考虑开发衡量数据价值以及数据对企业影响力的算法。

"哪些数据集是最常用的?我们可以尝试治理这些数据,确保这些数据的可用性,"Latulippe解释说。"我们正从这两方面解决问题--算法,以及考虑企业要治理什么。我们希望专注于关键的数据元素,我们认为这是具有高交织的数据集。"

但企业可以把这种价值放到银行里的吗?Latulippe当然希望如此--除了企业大数据目标相关的价值之外,她的团队还希望能展现从金钱角度数据湖所能体现的价值。

"我们正式试图推动实际的美元计价,"他说。关于治理数据湖,她的团队要问,"你的数据具有金钱价值吗,它如何与业务战略关联起来?"

安全性与可访问性的平衡

适当治理数据,从中获得价值,这还要面对一项挑战:那就是在确保安全控制的同时,针对企业内需要能连接到有用数据的那些人的可访问性。Latulippe认为,对于那些管理数据、特别是管理数据湖中的数据的任何企业机构来说,都要面对这个挑战。

"我们有很多大数据进来,"她提到了蓬勃发展的物联网市场和Twitter都是目前客户关心的两个主要数据源。"从客户的经验来说,我们希望知道他们的感受是怎样的,"Latulippe补充说,会重新考虑用标记和编目数据的方法,在安全性和可访问性之间找到一种平衡。"治理很好地融合了法律和安全,我们可以针对业务流程对这些数据进行标记。"

另外一个平衡安全性和可访问性、同时与管理数据湖所有其他目标保持一致的方法,就是给数据集分配一个受托人。这对于那些犹豫着要不要分享数据的企业来说特别有用。"这就是为什么我们想到了受托人的想法,划分好谁可以访问,谁正在利用这些数据推动数据所有权,"Latulippe解释说。
原文发布时间为:2016年7月18日

本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。

相关文章
|
6月前
|
存储 数据挖掘 BI
数据平台发展史-从数据仓库数据湖到数据湖仓 1
数据平台发展史-从数据仓库数据湖到数据湖仓
|
5月前
|
存储 人工智能 Cloud Native
耳朵经济快速增长背后,喜马拉雅数据价值如何释放 | 创新场景
喜马拉雅和阿里云的合作,正走在整个互联网行业的最前沿,在新的数据底座之上,喜马拉雅的AI、大数据应用也将大放光彩。本文摘自《云栖战略参考》
46463 5
耳朵经济快速增长背后,喜马拉雅数据价值如何释放 | 创新场景
|
3月前
|
存储 人工智能 运维
【云原生企业级数据湖:打破数据孤岛,优化存储成本】
【云原生企业级数据湖:打破数据孤岛,优化存储成本】 随着大数据时代的到来,企业对于数据的处理和存储需求日益增长。如何有效地存储和管理大量数据,同时降低运维成本,成为了企业面临的一大挑战。盛通教育的云原生企业级数据湖方案,正是为了解决这一问题而设计的。
163 1
|
3月前
|
存储 对象存储 SQL
【获奖名单公示】Hologres实时湖仓分析挑战赛
5分钟快速使用Hologres实时湖仓能力,无需移动数据,直接加速读取存储于数据湖OSS上的Hudi、Delta、Paimon等格式类型的数据
【获奖名单公示】Hologres实时湖仓分析挑战赛
|
4月前
|
SQL 分布式计算 Apache
流数据湖平台Apache Paimon(六)集成Spark之DML插入数据
流数据湖平台Apache Paimon(六)集成Spark之DML插入数据
82 0
|
5月前
|
存储 数据采集 安全
什么是数据管理,数据治理,数据中心,数据中台,数据湖?
什么是数据管理,数据治理,数据中心,数据中台,数据湖?
166 0
|
6月前
|
SQL 存储 人工智能
数据平台发展史-从数据仓库数据湖到数据湖仓 2
数据平台发展史-从数据仓库数据湖到数据湖仓
|
8月前
|
分布式计算 DataWorks 对象存储
全链路数据湖开发治理解决方案2.0重磅升级,全面增强数据入湖、调度和治理能力
阿里云全链路数据湖开发治理解决方案能力持续升级,发布2.0版本。解决方案包含开源大数据平台E-MapReduce(EMR) , 一站式大数据数据开发治理平台DataWorks ,数据湖构建DLF,对象存储OSS等核心产品。支持EMR新版数据湖DataLake集群(on ECS)、自定义集群(on ECS)、Spark集群(on ACK)三种形态,对接阿里云一站式大数据开发治理平台DataWorks,沉淀阿里巴巴十多年大数据建设方法论,为客户完成从入湖、建模、开发、调度、治理、安全等全链路数据湖开发治理能力,帮助客户提升数据的应用效率。
1282 1
|
10月前
|
存储 XML 弹性计算
带你读《云存储应用白皮书》之31:4. 数据湖存储解决方案
带你读《云存储应用白皮书》之31:4. 数据湖存储解决方案
210 0
|
1月前
|
SQL 分布式计算 数据处理
Uber基于Apache Hudi增量 ETL 构建大规模数据湖
Uber基于Apache Hudi增量 ETL 构建大规模数据湖
52 2