AI 助理
文档备案控制台
开发者社区 大数据 文章 正文

【Hadoop Summit Tokyo 2016】使用Apache Ranger和Apache Atlas进行数据治理

2017-02-28 6729
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 本讲义出自Madhan Neethiraj在Hadoop Summit Tokyo 2016上的演讲，主要分享了如何使用Apache Ranger和Apache Atlas保障数据安全并进行数据治理，首先分享了Apache Ranger的概览、授权策略、行过滤和列标记策略以及审计日记等相关内容，之后分享了Apache Atlas的概览的相关内容。

本讲义出自Madhan Neethiraj在Hadoop Summit Tokyo 2016上的演讲，主要分享了如何使用Apache Ranger和Apache Atlas保障数据安全并进行数据治理，首先分享了Apache Ranger的概览、授权策略、行过滤和列标记策略以及审计日记等相关内容，之后分享了Apache Atlas的概览的相关内容。

4e405858c94aefd87665a802c48825fb0bc43ce9

56617f9df501479b4256897c9c58d1d1dac579c5

6d8c9272f5b9ecf126d2de07232a7570970deb60

cddb80154c71f75480483b7762ec898b8ba14dd7

3e9ab847688171077be82a8c7ffcc1a4ea5b3f0d

b4e6faddeec6e4529e974289fbd83caef2aa2a7c

8b50396193cedf6ff942c71f103d313d28b82aa8

9d87c71f77b10fa4947dc4ffde36f21b2853c584

72f6a2287e1b29c16caa331bcad139acacea0265

75233b218d5a14fe9b5f0eae799cd46de3b664d3

379527bb47ccaca2ad762cfe588fbc90ec400bb7

6c654d4ae05b355074cad76042177308a2294f3b

7805097168e4e9341c0888c0db51002c8b38eef2

e098322f3a659f86f43cbef629fd5bac280d3901

4eba18d7ac1154597bbad46761b7808dab6b9299

5462a2351e780db89dacb4096e96ca67f24355b0

809ccad371a1a0c282619a76518ae8337b002fb3

46c54b69c55a7e58613a338bef2ec3dcc9755667


文章标签：
Apache
atlas
分布式计算
Hadoop
数据安全/隐私保护
关键词：
Apache数据
hadoop数据
Apache hadoop
hadoop apache
hadoop tokyo数据
小猫吃鱼569
目录
相关文章
土木林森
|
物联网 数据管理 Apache
拥抱IoT浪潮，Apache IoTDB如何成为你的智能数据守护者？解锁物联网新纪元的数据管理秘籍！
【8月更文挑战第22天】随着物联网技术的发展，数据量激增对数据库提出新挑战。Apache IoTDB凭借其面向时间序列数据的设计，在IoT领域脱颖而出。相较于传统数据库，IoTDB采用树形数据模型高效管理实时数据，具备轻量级结构与高并发能力，并集成Hadoop/Spark支持复杂分析。在智能城市等场景下，IoTDB能处理如交通流量等数据，为决策提供支持。IoTDB还提供InfluxDB协议适配器简化迁移过程，并支持细致的权限管理确保数据安全。综上所述，IoTDB在IoT数据管理中展现出巨大潜力与竞争力。
土木林森
639 1
SelectDB
|
存储 人工智能 数据处理
Apache Doris 2025 Roadmap：构建 GenAI 时代实时高效统一的数据底座
秉承“以场景驱动创新” 的核心理念，持续深耕三大核心场景的关键能力，并对大模型 GenAI 场景的融合应用进行重点投入，为智能时代构建实时、高效、统一的数据底座。
SelectDB
653 10
Apache Doris 2025 Roadmap：构建 GenAI 时代实时高效统一的数据底座
SelectDB
|
存储 运维 监控
从 ClickHouse 到 Apache Doris：在网易云音乐日增万亿日志数据场景下的落地
日志数据已成为企业洞察系统状态、监控网络安全及分析业务动态的宝贵资源。网易云音乐引入 Apache Doris 作为日志库新方案，替换了 ClickHouse。解决了 ClickHouse 运维复杂、不支持倒排索引的问题。目前已经稳定运行 3 个季度，规模达到 50 台服务器， 倒排索引将全文检索性能提升7倍，2PB 数据，每天新增日志量超过万亿条，峰值写入吞吐 6GB/s 。
SelectDB
1086 5
从 ClickHouse 到 Apache Doris：在网易云音乐日增万亿日志数据场景下的落地
SelectDB
|
存储 SQL 数据挖掘
数据无界、湖仓无界， Apache Doris 湖仓一体解决方案全面解读（上篇）
湖仓一体架构融合了数据湖的低成本、高扩展性，以及数据仓库的高性能、强数据治理能力，高效应对大数据时代的挑战。为助力企业实现湖仓一体的建设，Apache Doris 提出了数据无界和湖仓无界核心理念，并结合自身特性，助力企业加速从 0 到 1 构建湖仓体系，降低转型过程中的风险和成本。本文将对湖仓一体演进及 Apache Doris 湖仓一体方案进行介绍。
SelectDB
1389 1
数据无界、湖仓无界， Apache Doris 湖仓一体解决方案全面解读（上篇）
SelectDB
|
存储 消息中间件 人工智能
AI大模型独角兽 MiniMax 基于阿里云数据库 SelectDB 版内核 Apache Doris 升级日志系统，PB 数据秒级查询响应
早期 MiniMax 基于 Grafana Loki 构建了日志系统，在资源消耗、写入性能及系统稳定性上都面临巨大的挑战。为此 MiniMax 开始寻找全新的日志系统方案，并基于阿里云数据库 SelectDB 版内核 Apache Doris 升级了日志系统，新系统已接入 MiniMax 内部所有业务线日志数据，数据规模为 PB 级， 整体可用性达到 99.9% 以上，10 亿级日志数据的检索速度可实现秒级响应。
SelectDB
1123 14
AI大模型独角兽 MiniMax 基于阿里云数据库 SelectDB 版内核 Apache Doris 升级日志系统，PB 数据秒级查询响应
武子康
|
SQL 消息中间件 大数据
大数据-159 Apache Kylin 构建Cube 准备和测试数据(一)
大数据-159 Apache Kylin 构建Cube 准备和测试数据(一)
武子康
421 1
武子康
|
SQL 大数据 Apache
大数据-159 Apache Kylin 构建Cube 准备和测试数据(二)
大数据-159 Apache Kylin 构建Cube 准备和测试数据(二)
武子康
256 1
武子康
|
分布式计算 监控 大数据
大数据-148 Apache Kudu 从 Flink 下沉数据到 Kudu
大数据-148 Apache Kudu 从 Flink 下沉数据到 Kudu
武子康
364 1
1941623231718325
|
存储 大数据 数据挖掘
【数据新纪元】Apache Doris：重塑实时分析性能，解锁大数据处理新速度，引爆数据价值潜能！
【9月更文挑战第5天】Apache Doris以其卓越的性能、灵活的架构和高效的数据处理能力，正在重塑实时分析的性能极限，解锁大数据处理的新速度，引爆数据价值的无限潜能。在未来的发展中，我们有理由相信Apache Doris将继续引领数据处理的潮流，为企业提供更快速、更准确、更智能的数据洞察和决策支持。让我们携手并进，共同探索数据新纪元的无限可能！
1941623231718325
549 11
呆呆宝
|
消息中间件 Kafka Apache
流计算引擎数据问题之Apache Kafka Streams 没有采用低水印方案如何解决
流计算引擎数据问题之Apache Kafka Streams 没有采用低水印方案如何解决
呆呆宝
199 0

热门文章

最新文章

  • 1
    Elasticsearch hadoop使用示例 & 运维实战之集群规划 &presto-elasticsearch connector
  • 2
    Hadoop的网络容错
  • 3
    Failed setting up proxy interface org.apache.hadoop.hbase.ipc.HRegionInterface
  • 4
    Hadoop中HDFS的API操作、HDFS文件上传（测试参数优先级）、copyFromLocalFile参数解读、HDFS文件下载、文件更名和移动、删除文件和目录、文件详情查看、文件和文件夹判断
  • 5
    Spark编程实验一：Spark和Hadoop的安装使用
  • 6
    ✨[hadoop3.x系列]HDFS REST HTTP API的使用(一)WebHDFS
  • 7
    【云计算与大数据技术】Hadoop MapReduce的讲解（图文解释，超详细必看）
  • 8
    VMware创建Linux虚拟机之（三）Hadoop安装与配置及搭建集群 下
  • 9
    云计算与大数据实验二 Hadoop的安装和集群的搭建
  • 10
    处理hadoop发送的文件到后台并解析存储到数据库策略
  • 1
    基于阿里云数据库 SelectDB 内核 Apache Doris 的实时/离线一体化架构，赋能中国联通 5G 全连接工厂解决方案
    1446
  • 2
    活动预告｜6月13日Apache Flink Meetup·香港站
    1058
  • 3
    众安保险 CDP 平台：借助阿里云数据库 SelectDB 版内核 Apache Doris 打破数据孤岛，人群圈选提速4倍
    592
  • 4
    云计算新宠：探索Apache Doris的云原生策略
    289
  • 5
    HBase Shell-org.apache.hadoop.hbase.ipc.ServerNotRunningYetException: Server is not running yet 已解决
    893
  • 6
    org.apache.hadoop.security.AccessControlException Permission denied: user=anonymous, access=WRITE...
    1448
  • 7
    org.apache.ibatis.binding.BindingException: Invalid bound statement (not found): com.example.forum.d
    255
  • 8
    AutoMQ 生态集成 Apache Doris
    353
  • 9
    Apache Flink CDC 3.1.0 发布公告
    1570
  • 10
    实时计算 Flink版操作报错之遇到错误org.apache.flink.table.api.ValidationException: Could not find any factory for identifier 'jdbc'，该如何解决
    4550

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第二阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第六阶段
  • 大数据Hadoop快速入门
  • Hadoop快速入门
  • Hadoop企业优化及扩展案例

    • 相关电子书

    更多
  • 《构建Hadoop生态批流一体的实时数仓》
  • 零基础实现hadoop 迁移 MaxCompute 之 数据
  • CIO 指南:如何在SAP软件架构中使用Hadoop

    • 相关实验场景

    更多
  • 搭建Hadoop环境

    • 推荐镜像

    更多
  • apache
    • 下一篇
    阿里云Agent安全中心领跑IDC 2026智能体威胁检测技术评估