AI 助理
备案控制台

Hadoop

首页 标签 Hadoop
# Hadoop #
关注
11265内容
最新 热门 文章 问答 视频 课程
anzhsoft
|
博文
HDFS追本溯源：租约，读写过程的容错处理及NN的主要数据结构
# 存储 # 机器学习/深度学习 # 分布式计算 # 安全 # Hadoop # 算法 # 负载均衡
程序员黄小斜
|
博文
五分钟学后端技术：一篇文章告诉你什么是云计算！
# 云虚拟主机 # 容器服务Kubernetes版 # 数据管理 # 资源管理 # 云数据库HBase版 # 云原生大数据计算服务 MaxCompute # 云安全中心 # 存储 # 分布式计算 # Java # 数据管理 # Hadoop # 分布式数据库 # 数据库 # 云计算 # 虚拟化 # 容器
雨客
|
博文
当前数据仓库建设过程
# 日志服务 # 云数据库 RDS MySQL 版 # SQL # 分布式计算 # 关系型数据库 # Hadoop # HIVE # Perl # MySQL # Shell # 存储 # 数据库
大数据资讯
|
博文
大数据hadoop从入门到精通之hadoop家族产品
作为一个hadoop入门级的新手，你会觉得哪些地方很难呢？运行环境的搭建恐怕就已经足够让新手头疼。如果每一个发行版hadoop都可以做到像大快DKHadoop那样把各种环境搭建集成到一起，一次安装搞定所有，那对于新手来说将是件多么美妙的事情！
# 云原生大数据计算服务 MaxCompute # SQL # 分布式计算 # 大数据 # Hadoop # Spark # 流计算 # HIVE # 机器学习/深度学习 # Hbase # 分布式数据库
雨客
|
博文
MapReduce任务运行过程
# 分布式计算 # Hadoop # Java # 调度
异步社区
|
博文
《Hadoop MapReduce性能优化》一2.1　研究Hadoop参数
# 存储 # 分布式计算 # Hadoop # Java
鸿初
|
博文
|
来自： 大数据与机器学习
都是default惹的祸-yarn调度（一）-fair调度器drf调度策略作业不执行问题的调查和源码分析
问题背景 yarn的fair类型资源池，是企业级hadoop用户常用的资源池类型。该资源池默认的队列调度策略是fair，即分配资源时只考虑内存限制。 对一个多个团队混合使用的大集群来说，如果想要在分配资源时同时考虑内存和cpu限制，需要指定调度策略为drf。
# 开源大数据平台 E-MapReduce # 日志服务 # 分布式计算 # 资源调度 # Hadoop # 调度
小猫吃鱼569
|
博文
【Hadoop Summit Tokyo 2016】文件格式的基准——Avro, JSON, ORC & Parquet
本讲义出自Owen O’Malley在Hadoop Summit Tokyo 2016上的演讲，主要分享了Avro, JSON, ORC & Parquet这些文件基本格式的相关内容，介绍了文件格式如何发挥不同的作用以及他们如何才能更好地发挥作用以及这些文件数据格式的各自的优点，还分享了如何使用真实的、多样化的数据集，并介绍了过度依赖类似的数据导致的弱点以及开放和审查基准。
# JSON # 分布式计算 # Hadoop # 数据格式
smartloli
|
博文
Hadoop - 任务调度系统比较
# 分布式计算 # 数据可视化 # Hadoop # 调度 # 数据库 # SQL # HIVE # 关系型数据库 # MySQL # 存储
技术小哥哥
|
博文
kafka的topic命名技巧
# 云消息队列 Kafka 版 # 消息中间件 # 分布式计算 # Hadoop # Kafka
免费试用