《CDP企业数据云平台从入门到实践》——CDP平台的安全和治理(6)

简介: 《CDP企业数据云平台从入门到实践》——CDP平台的安全和治理(6)

《CDP企业数据云平台从入门到实践》——CDP平台的安全和治理(5) https://developer.aliyun.com/article/1228317?groupCode=ClouderaCDP


三、 数据治理


1. 建立可信数据湖的数据管理


利用 CDP 平台构建可信数据湖,其中包含了大量的数据管理,包括:数据质量和配置文件、安全和访问控制、元数据管理、数据保留和归档、主数据管理、业务定义、数据血缘、审计、搜索和索引、治理等。


image.png


2. 理解你的数据


通过了解以下内容更好的理解数据:


• 如何发现哪些数据存储在哪里?

• 如何追踪数据沿袭?

• 如何以适当的粒度保护数据?

• 如何跟踪谁有权访问数据?

• 如何审核谁访问了数据?

• 如何启用数据自助服务?

• 如何始终如一地管理创建、应用和管理策略?

• 如何确保元数据随数据移动而保留?


3. Apache Atlas 架构


Apache Atlas 为 Hadoop 提供数据治理功能。Apache Atlas 用作通用元数据存储,旨在在 Hadoop 堆栈内外交换元数据。Atlas 与 Apache Ranger 的紧密集成使您能够跨 Hadoop 堆栈的所有组件一致地定义、管理和管理安全性和合规性策略。Atlas为 Data Steward Studio 提供元数据和沿袭,以支持跨企业数据管理数据。CDP 平台使用 Apache Atlas 来进行理解数据的工作。Atlas 主要负责元数据管理、数据血缘和数据分类处理,其架构图如下:


image.png


• Apache Atals 通过 Messaging 消息框架从 Apache Hadoop 组件中捕获数据血缘,并将数据血缘维护到 Janus 图数据库系统中。

• 审计系统是维护元数据变更的操作审计。

• 在他们之上提供包括分类、数据资产、业务术语、血缘等搜索能力,最上层是REST API,可以灵活访问 Apache Atlas 服务、Cloudera 数据平台(CDP)组件、UI 和外部工具。

• Bridge 负责导入和导出到现有业务元数据,并与其他系统进行集成整合。


《CDP企业数据云平台从入门到实践》——CDP平台的安全和治理(7) https://developer.aliyun.com/article/1228315?groupCode=ClouderaCDP




相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL,然后进行数据表的CRUD操作。
目录
相关文章
|
监控 安全 数据可视化
java基于微服务的智慧工地管理云平台SaaS源码 数据大屏端 APP移动端
围绕施工现场人、机、料、法、环、各个环节,“智慧工地”将传统建筑施工与大数据物联网无缝结合集成多个智慧应用子系统,施工数据云端整合分析,提供专业、先进、安全的智慧工地解决方案。
553 1
|
机器学习/深度学习 算法 数据可视化
基于Google Earth Engine云平台构建的多源遥感数据森林地上生物量AGB估算模型含生物量模型应用APP
基于Google Earth Engine云平台构建的多源遥感数据森林地上生物量AGB估算模型含生物量模型应用APP
1168 0
|
机器学习/深度学习 人工智能 自然语言处理
基于星海智算云平台部署 DeepSeek-R1系列 70b 模型全攻略(附平台福利)
本文介绍了如何在星海智算云平台上部署DeepSeek-R1系列70B模型,解决官网访问不畅的问题。通过云端部署,用户可以按需付费,避免本地部署高昂成本(高达两百多万)。文章详细讲解了从实例创建到开始使用DeepSeek的八个步骤,并提供了成本优化技巧和新手注意事项。推荐使用双A100显卡,每小时费用仅13.32元。新用户还可领取福利,享受高性价比服务。立即注册体验:[星海智算云平台](https://gpu.spacehpc.com/user/register?inviteCode=52872508)。
1530 1
基于星海智算云平台部署 DeepSeek-R1系列 70b 模型全攻略(附平台福利)
|
存储 资源调度 云计算
什么是云计算平台?如何打造云平台核心要件?
云计算平台基于虚拟化和分布式计算技术,提供灵活、可扩展的计算资源与服务框架,支持跨地域的数据处理和应用运行。它通过集中管理资源、优化分配,提高系统可用性和响应速度,降低运营成本,增强用户体验。平台分为IaaS、PaaS和SaaS三层架构,具备动态资源调度、多租户隔离和服务可靠性等优势。构建要素包括基础框架设计、关键技术组件及运维支撑体系,确保高效、安全的云服务交付。
2991 3
|
大数据 定位技术
《CDP企业数据云平台从入门到实践》——Cloudera CDP 产品介绍 (3)
《CDP企业数据云平台从入门到实践》——Cloudera CDP 产品介绍 (3)
695 0
|
监控 安全 Java
【Java】Spring Cloud 智慧工地信息云平台源码(PC端+APP端)项目平台、监管平台、大数据平台
【Java】Spring Cloud 智慧工地信息云平台源码(PC端+APP端)项目平台、监管平台、大数据平台
493 0
|
人工智能 安全 数据管理
智慧校园管理平台源码 SaaS云平台
电子班牌系统应用: 通知管理、图片管理、班级考勤、综合素质评价、视频管理、考场管理、请假管理、成绩管理、个人信息、进离校管理、家长通讯录、教师通讯录、教师课表、AI智能分析、课堂点名、课堂授课、家长会签到、活动报名、积分商城、倒计时、班级德育、体温检测、放学管理、学生评价。
560 0
|
SQL 安全 大数据
《CDP企业数据云平台从入门到实践》——Cloudera CDP 产品介绍 (1)
《CDP企业数据云平台从入门到实践》——Cloudera CDP 产品介绍 (1)
1335 0
|
弹性计算 分布式计算 安全
《CDP企业数据云平台从入门到实践》——Cloudera CDP 产品介绍 (2)
《CDP企业数据云平台从入门到实践》——Cloudera CDP 产品介绍 (2)
820 0

热门文章

最新文章