视频介绍
庞大的小文件和冷文件数量会对HDFS的性能产生不利影响，严重时甚至影响业务稳定性，这个主题将介绍对大容量HDFS进行小文件和冷文件分析的方法，并基于分析结果可以采取哪些处理措施。
讲师：
郭聪，花名析源，阿里云计算平台事业部技术专家。目前主要从事大数据领域APM产品的研发工作。
相关视频
阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。
热门文章
热门讨论
-
阿里封神谈hadoop生态学习之路49539
-
如何在Aliyun E-MapReduce集群上使用Zeppelin和Hue12896
-
阿里封神-大数据处理技术漫谈11857
-
JindoFS概述：云原生的大数据计算存储分离方案23138
-
助力云上开源生态 - 阿里云开源大数据平台的发展11800
-
开源大数据周刊-第90期9727
-
Apache Spark 3.0 将内置支持 GPU 调度10527
-
E-MapReduce上如何采集Kafka客户端Metrics6658
-
E-MapReduce结合DataV进行数据展现6477
-
使用Spark Streaming SQL基于时间窗口进行数据统计8361
展开全部
-
Databricks 和 Dataworks 都是一站式的数据分析平台，两者的区别是什么？2042
-
hdfs 文件块过多（1亿）每个datanode 占3000万块(分16G内),某时刻内存陡然增加？529
-
hdfs使用Jindo SDK 4.6.10 往oss迁数据时候问题，oss类型归档存储278
-
我想问一下阿里云E-MapReduce，为什么会报错这个信息呢？199
-
大佬，可以请教下，有没有遇到 com.aliyun.oss1192
-
想问下，maxcomputer 创建的SQL脚本 可以用shell 调用运行吗1102
-
Mlflow的四个核心功能解决了机器学习工作流中的哪些痛点？453
-
阿里云E-MapReduce notebook 大概什么时候会正式上线？280
-
Mem usage has exceed the limit of BE - com.mysql.j1462
-
starrocks压缩 比是多少呀？602
展开全部
来源圈子
更多
+ 订阅
相关文章
更多
基于hadoop的免费大数据平台有哪些？
离线部署 CDH 5.12.1 及使用 CDH 部署 Hadoop 大数据平台集群服务
EnterpriseDB剑指Hadoop:优化数据处理
开发人员学Linux(14)：CentOS7安装配置大数据平台Hadoop2.9.0
Hadoop大数据平台提权漏洞CVE-2017-7669 2.8 3.0alpha1 3.0alpha2均受影响
Hadoop工具如何形成SAP Hana的大数据平台
《Hadoop与大数据挖掘》一1.2 大数据平台
Hadoop 这样业界顶级的大规模数据处理平台，均发现满足不了类似双十一这样全世界的剁手党蜂拥而至的热情
分布式处理与大数据平台(RabbitMQ&Celery&Hadoop&Spark&Storm&Elasticsearch)
hadoop和Hive的数据处理流程