hadoop安装过程中包括yarn的节点，hadoop有多个节点，spark也是多个节点，也区分master和slave
hadoop/spark节点动态调整
2018-03-06
993
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
转自：hadoop2.7 动态新增节点和删除节点转自：spark集群动态增加worker节点hadoop安装过程中包括yarn的节点，hadoop有多个节点，spark也是多个节点，也区分master和slave ...
目录
相关文章
|
20天前
|
存储
分布式计算
Hadoop
|
3天前
|
数据采集
分布式计算
Hadoop
|
6天前
|
分布式计算
资源调度
Hadoop
|
11天前
|
存储
分布式计算
资源调度
|
22天前
|
分布式计算
Hadoop
大数据
|
22天前
|
分布式计算
Hadoop
大数据
大数据技术：Hadoop与Spark的对比
【6月更文挑战第15天】**Hadoop与Spark对比摘要**
Hadoop是分布式系统基础架构，擅长处理大规模批处理任务，依赖HDFS和MapReduce，具有高可靠性和生态多样性。Spark是快速数据处理引擎，侧重内存计算，提供多语言接口，支持机器学习和流处理，处理速度远超Hadoop，适合实时分析和交互式查询。两者在资源占用和生态系统上有差异，适用于不同应用场景。选择时需依据具体需求。
95
1
2
|
16天前
|
分布式计算
资源调度
Java
Scala+Spark+Hadoop+IDEA实现WordCount单词计数，上传并执行任务（简单实例-下）
Scala+Spark+Hadoop+IDEA实现WordCount单词计数，上传并执行任务（简单实例-下）
18
0
0
|
16天前
|
分布式计算
Hadoop
Scala
Scala +Spark+Hadoop+Zookeeper+IDEA实现WordCount单词计数（简单实例-上）
Scala +Spark+Hadoop+Zookeeper+IDEA实现WordCount单词计数（简单实例-上）
15
0
0
|
物联网
大数据
程序员
《Spark与Hadoop大数据分析》——导读
1221
0
0
|
分布式计算
Hadoop
Spark
《Spark与Hadoop大数据分析》——3.7 小结
本节书摘来自华章计算机《Spark与Hadoop大数据分析》一书中的第3章，第3.7节，作者 [美]文卡特·安卡姆（Venkat Ankam），译 吴今朝，更多章节内容可以访问云栖社区“华章计算机”公众号查看。
1097
0
0