hadoop_学习_00_资源帖
2018-03-20
1053
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
一、精品
1.虚无境的博客
随笔分类 - hadoop
二、参考资料
1.大数据学习之路（持续更新中...）
2.Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0
3.hadoop安装教程
目录
相关文章
|
7月前
|
分布式计算
Hadoop
大数据
|
7月前
|
分布式计算
Hadoop
大数据
|
1天前
|
分布式计算
资源调度
Hadoop
Hadoop节点资源扩展环境部署
【4月更文挑战第16天】扩展Hadoop集群涉及多个步骤：准备新节点，配置静态IP，安装并配置Hadoop，将新节点添加到集群，验证测试，及优化调整。确保符合硬件需求，更新集群节点列表，执行`hdfs dfsadmin -refreshNodes`命令，检查新节点状态，并依据测试结果优化性能。注意不同环境可能需要调整具体步骤，建议参照官方文档并在测试环境中预演。
13
4
4
|
1天前
|
存储
分布式计算
固态存储
Hadoop节点资源扩展硬件选择
【4月更文挑战第16天】在扩展Hadoop节点资源时，重点是选择合适的硬件。推荐使用x86架构的机架式服务器，配备多核高主频处理器以提升计算能力，确保至少16GB内存以支持高效数据处理。选择高容量、高速度的SAS或SSD硬盘，并利用RAID技术增强数据冗余和容错。网络方面，需要千兆以太网或更快的连接以保证数据传输。同时，要考虑成本、功耗和维护，确保硬件与Hadoop版本兼容，并在选购前进行充分测试。
13
3
3
|
9天前
|
分布式计算
Hadoop
大数据
Hadoop【hadoop学习大纲完全总结01+02+03+04+05】【自学阶段整理的xmind思维导图分享】【点击可放大看高清】
【4月更文挑战第5天】Hadoop【hadoop学习大纲完全总结01+02+03+04+05】【自学阶段整理的xmind思维导图分享】【点击可放大看高清】
32
5
5
|
7月前
|
存储
分布式计算
Hadoop
|
4月前
|
消息中间件
关系型数据库
MySQL
Hadoop学习笔记（HDP）-Part.03 资源规划
01 关于HDP
02 核心组件原理
03 资源规划
04 基础环境配置
05 Yum源配置
06 安装OracleJDK
07 安装MySQL
08 部署Ambari集群
09 安装OpenLDAP
10 创建集群
11 安装Kerberos
12 安装HDFS
13 安装Ranger
14 安装YARN+MR
15 安装HIVE
16 安装HBase
17 安装Spark2
18 安装Flink
19 安装Kafka
20 安装Flume
76
0
0
|
7月前
|
存储
分布式计算
Hadoop
|
7月前
|
分布式计算
Hadoop
Java
|
8月前
|
机器学习/深度学习
存储
分布式计算
热门文章
最新文章
1
利用Hive与Hadoop构建大数据仓库：从零到一
2
Hadoop【基础知识 05】【HDFS的JavaAPI】（集成及测试）
3
Hadoop【基础知识 03+04】【Hadoop集群资源管理器yarn】（图片来源于网络）（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
4
Hadoop【hadoop学习大纲完全总结01+02+03+04+05】【自学阶段整理的xmind思维导图分享】【点击可放大看高清】
5
大数据处理架构Hadoop
6
大数据技术与Python：结合Spark和Hadoop进行分布式计算
7
Hadoop【问题记录 02】【hadoop-3.1.3 单机版】ResourceManager无法启动NodeManager启动后过自动关闭 javax/activation/DataSource
8
Hadoop【基础知识 04】【HDFS常用shell命令】（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
9
【Hadoop】HDFS 读写流程
10
Hadoop【基础知识 03】【Hadoop集群资源管理器yarn】（图片来源于网络）
1
Hadoop节点资源扩展环境部署
13
2
Hadoop节点资源扩展硬件选择
13
3
Hadoop的NameNode的监控与副本管理
12
4
Hadoop集群节点添加
15
5
hadoop的伪分布式搭建-带网盘
17
6
Hadoop的运行模式
7
7
Hadoop【hadoop学习大纲完全总结01+02+03+04+05】【自学阶段整理的xmind思维导图分享】【点击可放大看高清】
32
8
Hadoop【基础知识 05】【HDFS的JavaAPI】（集成及测试）
36
9
Hadoop【基础知识 03+04】【Hadoop集群资源管理器yarn】（图片来源于网络）（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
36
10
Hadoop【基础知识 04】【HDFS常用shell命令】（hadoop fs + hadoop dfs + hdfs dfs 使用举例）
24