03 Hadoop国内外应用案例介绍
2023-10-31
236
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
03 Hadoop国内外应用案例介绍
目录
相关文章
|
存储
分布式计算
Hadoop
基于docker的Hadoop环境搭建与应用实践（脚本部署）
本文介绍了Hadoop环境的搭建与应用实践。对Hadoop的概念和原理进行了简要说明，包括HDFS分布式文件系统和MapReduce计算模型等，主要通过脚本的方式进行快捷部署，在部署完成后对HDFS和mapreduce进行了测试，确保其功能正常。
4119
0
0
|
1月前
|
分布式计算
NoSQL
Java
Hadoop-32 ZooKeeper 分布式锁问题 分布式锁Java实现 附带案例和实现思路代码
Hadoop-32 ZooKeeper 分布式锁问题 分布式锁Java实现 附带案例和实现思路代码
43
2
2
|
2月前
|
分布式计算
Hadoop
Devops
Hadoop集群配置https实战案例
本文提供了一个实战案例，详细介绍了如何在Hadoop集群中配置HTTPS，包括生成私钥和证书文件、配置keystore和truststore、修改hdfs-site.xml和ssl-client.xml文件，以及重启Hadoop集群的步骤，并提供了一些常见问题的故障排除方法。
79
3
3
|
6月前
|
存储
分布式计算
监控
Hadoop【基础知识 01+02】【分布式文件系统HDFS设计原理+特点+存储原理】（部分图片来源于网络）【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】（图片来源于网络）
【4月更文挑战第3天】【分布式文件系统HDFS设计原理+特点+存储原理】（部分图片来源于网络）【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】（图片来源于网络）
308
2
2
|
3月前
|
机器学习/深度学习
存储
分布式计算
Hadoop与机器学习的融合：案例研究
【8月更文第28天】随着大数据技术的发展，Hadoop已经成为处理大规模数据集的重要工具。同时，机器学习作为一种数据分析方法，在各个领域都有着广泛的应用。本文将介绍如何利用Hadoop处理大规模数据集，并结合机器学习算法来挖掘有价值的信息。我们将通过一个具体的案例研究——基于用户行为数据预测用户留存率——来展开讨论。
257
0
0
|
3月前
|
资源调度
分布式计算
监控
【揭秘Hadoop YARN背后的奥秘！】从零开始，带你深入了解YARN资源管理框架的核心架构与实战应用！
【8月更文挑战第24天】Hadoop YARN（Yet Another Resource Negotiator）是Hadoop生态系统中的资源管理器，为Hadoop集群上的应用提供统一的资源管理和调度框架。YARN通过ResourceManager、NodeManager和ApplicationMaster三大核心组件实现高效集群资源利用及多框架支持。本文剖析YARN架构及组件工作原理，并通过示例代码展示如何运行简单的MapReduce任务，帮助读者深入了解YARN机制及其在大数据处理中的应用价值。
87
0
0
|
6月前
|
分布式计算
数据可视化
Hadoop
|
6月前
|
分布式计算
监控
Hadoop
Hadoop【基础知识 02】【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】（图片来源于网络）
【4月更文挑战第3天】Hadoop【基础知识 02】【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】（图片来源于网络）
278
0
0
|
数据采集
分布式计算
搜索推荐
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结（一）
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结（一）
188
0
0
|
6月前
|
存储
Linux
热门文章
最新文章
1
Hadoop迁移MaxCompute神器之DataX-On-Hadoop使用指南
2
Hadoop 2.x本地库native lib及如何源码编译
3
【centos6.5 hadoop2.7 _64位一键安装脚本】有问题加我Q直接问
4
linux下安装hadoop步骤
5
hadoop安装小记
6
cdh5.3.10_hadoop环境迁移之主机IP修改
7
Hadoop 2.x HDFS和YARN的启动方式
8
发布Apache Hadoop 2.6.0——异构存储，长时间运行的服务与滚动升级支持
9
淘宝数据可视化大屏案例(Hadoop实验)
10
基于Hadoop的云盘系统客户端技术难点之二 HDFS文件访问控制