AI 助理
备案控制台

Hadoop

首页 标签 Hadoop
# Hadoop #
关注
11357内容
最新 热门 文章 问答 视频 课程
thinktothings
|
博文
Spark2.4.0 SparkSession 源码分析
创建SparkContext new SparkSession
# 分布式计算 # Spark # Java # Hadoop
thinktothings
|
博文
Hadoop 3.1.1伪分布式模式安装
- 学会安装Hadoop3.1.1版本的伪分布式模式 - 可以进行Hadoop技术开发(包括HDFS,MapReduce等) - HDFS启动停止命令，yarn启动停止命令 - 官网自带WorldCount示例运行 - 进行管理界面管理NamenNode管理和ResourceManager管...
# 分布式计算 # 资源调度 # Hadoop # Java # 网络安全
狂想盼盼
|
博文
Squirrel 连接Hive
# SQL # 分布式计算 # Hadoop # Java # HIVE # 数据安全/隐私保护 # 网络协议 # 数据挖掘 # 运维 # 开发工具
smartloli
|
博文
高可用Hadoop平台－Hue In Hadoop
# 云数据库 RDS MySQL 版 # 云数据库HBase版 # SQL # 分布式计算 # Hadoop # Apache # 数据库 # 关系型数据库 # HIVE # MySQL # Hbase # 分布式数据库
隐林
|
博文
自建Hadoop迁移阿里云MaxCompute实践-持续更新2018/9/13
Hadoop迁移MaxCompute的文章教程应该不少，比如前不久刚刚发布的《Hadoop数据迁移到MaxCompute最佳实践》https://help.aliyun.com/video_detail/88429.
# 云原生大数据计算服务 MaxCompute # 专有网络VPC # 数据集成 Data Integration # SQL # 分布式计算 # Hadoop # MaxCompute # DataX
雨客
|
博文
当前数据仓库建设过程
# 日志服务 # 云数据库 RDS MySQL 版 # SQL # 分布式计算 # 关系型数据库 # Hadoop # HIVE # Perl # MySQL # Shell # 存储 # 数据库
雨客
|
博文
MapReduce任务运行过程
# 分布式计算 # Hadoop # Java # 调度
轩墨
|
博文
航空公司大数据建设的思考
# 云原生大数据计算服务 MaxCompute # 分布式计算 # 算法 # 大数据 # Hadoop # BI
鸿初
|
博文
|
来自： 大数据与机器学习
都是default惹的祸-yarn调度（一）-fair调度器drf调度策略作业不执行问题的调查和源码分析
问题背景 yarn的fair类型资源池，是企业级hadoop用户常用的资源池类型。该资源池默认的队列调度策略是fair，即分配资源时只考虑内存限制。 对一个多个团队混合使用的大集群来说，如果想要在分配资源时同时考虑内存和cpu限制，需要指定调度策略为drf。
# 开源大数据平台 E-MapReduce # 日志服务 # 分布式计算 # 资源调度 # Hadoop # 调度
叶康铭
|
博文
阿里云ECS构建大数据平台实践-基于Apache Hadoop
基于阿里云ECS云服务器进行搭建私有的大数据平台，采用Apache Hadoop生态，为大数据提供存储及处理。
# 云原生大数据计算服务 MaxCompute # 云服务器 ECS # 云防火墙 # 分布式计算 # 大数据 # Hadoop # 网络安全 # Apache
免费试用