本讲义出自Vinay Shukla在Hadoop Summit Tokyo 2016上的演讲，主要介绍了 Spark的安全体系、以及YARN AM上的Spark驱动以及Kerberos身份验证等相关内容，最后还介绍了SparkSQL的相关内容。
【Hadoop Summit Tokyo 2016】Apache Spark & Apache Zeppelin的安全状态
2017-03-02
2924
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
本讲义出自Vinay Shukla在Hadoop Summit Tokyo 2016上的演讲，主要介绍了 Spark的安全体系、以及YARN AM上的Spark驱动以及Kerberos身份验证等相关内容，最后还介绍了SparkSQL的相关内容。
目录
相关文章
|
4月前
|
分布式计算
大数据
数据处理
Apache Spark：提升大规模数据处理效率的秘籍
【4月更文挑战第7天】本文介绍了Apache Spark的大数据处理优势和核心特性，包括内存计算、RDD、一站式解决方案。分享了Spark实战技巧，如选择部署模式、优化作业执行流程、管理内存与磁盘、Spark SQL优化及监控调优工具的使用。通过这些秘籍，可以提升大规模数据处理效率，发挥Spark在实际项目中的潜力。
210
0
0
|
4月前
|
机器学习/深度学习
SQL
分布式计算
|
4月前
|
机器学习/深度学习
SQL
分布式计算
|
11月前
|
分布式计算
资源调度
Java
|
11月前
|
SQL
分布式计算
Java
|
23天前
|
分布式计算
Hadoop
大数据
大数据处理框架在零售业的应用：Apache Hadoop与Apache Spark
【8月更文挑战第20天】Apache Hadoop和Apache Spark为处理海量零售户数据提供了强大的支持
32
0
0
|
27天前
|
分布式计算
Serverless
数据处理
EMR Serverless Spark 实践教程 | 通过 Apache Airflow 使用 Livy Operator 提交任务
Apache Airflow 是一个强大的工作流程自动化和调度工具，它允许开发者编排、计划和监控数据管道的执行。EMR Serverless Spark 为处理大规模数据处理任务提供了一个无服务器计算环境。本文为您介绍如何通过 Apache Airflow 的 Livy Operator 实现自动化地向 EMR Serverless Spark 提交任务，以实现任务调度和执行的自动化，帮助您更有效地管理数据处理任务。
140
0
0
|
2月前
|
分布式计算
Apache
Spark
|
3月前
|
分布式计算
大数据
数据处理
Apache Spark在大数据处理中的应用
Apache Spark是大数据处理的热门工具，由AMPLab开发并捐赠给Apache软件基金会。它以内存计算和优化的执行引擎著称，提供比Hadoop更快的处理速度，支持批处理、交互式查询、流处理和机器学习。Spark架构包括Driver、Master、Worker Node和Executor，核心组件有RDD、DataFrame、Dataset、Spark SQL、Spark Streaming、MLlib和GraphX。文章通过代码示例展示了Spark在批处理、交互式查询和实时数据处理中的应用，并讨论了其优势（高性能、易用性、通用性和集成性）和挑战。【6月更文挑战第11天】
83
6
6
|
3月前
|
分布式计算
Spark
大数据
深入探究Apache Spark在大数据处理中的实践应用
【6月更文挑战第2天】Apache Spark是流行的开源大数据处理框架，以其内存计算速度和低延迟脱颖而出。本文涵盖Spark概述、核心组件（包括Spark Core、SQL、Streaming和MLlib）及其在数据预处理、批处理分析、交互式查询、实时处理和机器学习中的应用。通过理解Spark内部机制和实践应用，可提升大数据处理效率，发挥其在各行业的潜力。
224
3
3
热门文章
最新文章
1
后Hadoop时代，我们该如何去架构自己的大数据平台
2
Hadoop迁移MaxCompute神器之DataX-On-Hadoop使用指南
3
搭建hadoop1.2集群
4
hadoop namenode管理元数据机制
5
Hadoop——大数据处理的宠儿
6
hadoop删除节点和添加节点
7
基于Hadoop的云盘系统客户端技术难点之一 上传和下载效率优化
8
spark-2.2.0-bin-hadoop2.6和spark-1.6.1-bin-hadoop2.6发行包自带案例全面详解（java、python、r和scala）之Basic包下的SparkPi.scala（图文详解）
9
hadoop安装入门
10
Hadoop-No.13之数据源系统以及数据结构
1
如何在win系统部署Apache服务并实现无公网ip远程访问
62
2
apache DbUtils 组件核心原理与应用
71
3
阿里云数据库内核 Apache Doris 基于 Workload Group 的负载隔离能力解读
66483
4
某时间段访问apache 服务器的请求IP
44
5
某时间段访问apache 服务器的请求有多少个
40
6
从零手写实现 apache Tomcat-02-web.xml 入门详细介绍
100
7
从零手写实现 apache Tomcat-01-入门介绍
61
8
apache-tika从ppt-pdf-xls读取文本
66
9
Apache(mod_proxy)+Tomcat负载均衡配置
107
10
CentOS6.5搭建SVN服务器(Apache+SVN)
39