视频介绍
庞大的小文件和冷文件数量会对HDFS的性能产生不利影响，严重时甚至影响业务稳定性，这个主题将介绍对大容量HDFS进行小文件和冷文件分析的方法，并基于分析结果可以采取哪些处理措施。
讲师：
郭聪，花名析源，阿里云计算平台事业部技术专家。目前主要从事大数据领域APM产品的研发工作。
相关视频
阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。
热门文章
热门讨论
-
分布式快照算法: Chandy-Lamport23631
-
现代流式计算的基石：Google DataFlow18540
-
JindoFS解析 - 云上大数据高性能数据湖存储方案14741
-
HIVE MapJoin异常问题处理总结15036
-
JindoFS概述：云原生的大数据计算存储分离方案23210
-
钉钉群直播【Spark Relational Cache 原理和实践】8970
-
使用Hive进行OSS数据处理的一个最佳实践11487
-
hive在E-MapReduce集群的实践（二）集群hive参数优化7641
-
开源大数据周刊-第97期6840
-
YARN中的CPU资源隔离-CGroups9856
展开全部
-
Databricks 和 Dataworks 都是一站式的数据分析平台，两者的区别是什么？2086
-
hdfs 文件块过多（1亿）每个datanode 占3000万块(分16G内),某时刻内存陡然增加？616
-
Spark调优数据分布不均是什么意思？529
-
想问下，maxcomputer 创建的SQL脚本 可以用shell 调用运行吗1141
-
阿里云共享块存储和NAS还有OSS的区别是什么呀7760
-
我想问一下阿里云E-MapReduce，为什么会报错这个信息呢？228
-
E-MapReduce和MaxCompute的区别是什么？1998
-
请问hive 的hive-site.xml文件在哪啊1667
-
starocks 访问oss报错 应该怎么处理？398
-
Ray是什么？2847
展开全部
来源圈子
更多
+ 订阅
相关文章
更多
【分布式计算框架】hadoop全分布式及高可用搭建
【分布式计算框架】Hadoop伪分布式安装
基于Hadoop分布式数据库HBase1.0部署及使用
[绝对要收藏]配置hadoop完全分布式环境
大数据技术与Python：结合Spark和Hadoop进行分布式计算
Hadoop【基础知识 01+02】【分布式文件系统HDFS设计原理+特点+存储原理】（部分图片来源于网络）【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】（图片来源于网络）
Hadoop【基础知识 02】【分布式计算框架MapReduce核心概念+编程模型+combiner&partitioner+词频统计案例解析与进阶+作业的生命周期】（图片来源于网络）
Hadoop【基础知识 01】【分布式文件系统HDFS设计原理+特点+存储原理】（部分图片来源于网络）
Apache Hadoop入门指南：搭建分布式大数据处理平台
Hadoop分布式