视频介绍
由阿里巴巴 EMR 团队提交的 TPC-DS 成绩在九月份的榜单中取得了排名第一的成绩。这个成绩背后离不开 EMR 团队对 Spark 执行引擎持续不断的优化。
本次分享将选取一些有代表性的优化点，深入到技术细节做详细介绍，包括但不限于动态过滤、CBO增强、TopK排序等等。
嘉宾介绍
辛庸，阿里巴巴计算平台事业部 EMR 技术专家。Apache Hadoop，Apache Spark contributor。对 Hadoop、Spark、Hive、Druid 等大数据组件有深入研究。目前从事大数据云化相关工作，专注于计算引擎、存储结构、数据库事务等内容。
相关视频
阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。
热门文章
热门讨论
-
现代流式计算的基石：Google DataFlow18545
-
如何使用Kafka Connect实现同步RDS binlog数据16108
-
JindoFS解析 - 云上大数据高性能数据湖存储方案14742
-
HIVE MapJoin异常问题处理总结15040
-
JindoFS概述：云原生的大数据计算存储分离方案23215
-
开源大数据周刊-第90期9736
-
从数砖开源 Delta Lake 说起9689
-
【译】使用Spark SQL 运行大规模基因组工作流9360
-
Flume NG 简介及配置实战9664
-
使用Hive进行OSS数据处理的一个最佳实践11496
展开全部
-
hdfs 文件块过多（1亿）每个datanode 占3000万块(分16G内),某时刻内存陡然增加？622
-
E-MapReduce和MaxCompute的区别是什么？2003
-
我想问一下阿里云E-MapReduce，为什么会报错这个信息呢？233
-
EMR StarRocks有hive或spark的炸裂函数，类似explode可以用吗?715
-
阿里云E-MapReduce在mac本地测试是需要怎么安装一下吗？279
-
阿里云共享块存储和NAS还有OSS的区别是什么呀7761
-
Databricks 和 Dataworks 都是一站式的数据分析平台，两者的区别是什么？2090
-
NeuSoft是什么？1682
-
想问下，maxcomputer 创建的SQL脚本 可以用shell 调用运行吗1145
-
阿里云E-MapReduce emr serverless具体指的是什么产品呢？60
展开全部
来源圈子
更多
邀请你加入钉钉群聊Apache Spark中国技术交流社区，点击进入查看详情 https://qr.dingtalk.com/action/joingroup?code=v1,k1,X7S/0/QcrLMkK7QZ5sw2oTvoYW49u0g5dvGu7PW+sm4=&_dt_no_comment=1&origin=11。</br>
微信公众号：Apache Spark技术交流社区
为 Spark 爱好者提供一个交流技术和传递资讯的平台，在这里你可以掌握大数据计算领域最前沿的资讯，可以与 Spark 技术大牛面对面交流，还有不定期社区福利领取哟～
+ 订阅
相关文章
更多
数据分析三剑客【AIoT阶段一（下）】（十万字博文 保姆级讲解）—Matplotlib—数据可视化高级—多图布局（1）（五）
数据分析三剑客【AIoT阶段一（下）】（十万字博文 保姆级讲解）—Matplotlib—数据可视化高级—多图布局（2）（六）
数据分析三剑客【AIoT阶段一（下）】（十万字博文 保姆级讲解）—Matplotlib—数据可视化高级（七）
数据分析三剑客【AIoT阶段一（下）】（十万字博文 保姆级讲解）—Matplotlib—数据可视化高级（八）
数据分析三剑客【AIoT阶段一（下）】（十万字博文 保姆级讲解）—Matplotlib—数据可视化进阶—常用视图（1）（九）
数据分析三剑客【AIoT阶段一（下）】（十万字博文 保姆级讲解）—Matplotlib—数据可视化进阶—常用视图（2）（十）
数据分析三剑客【AIoT阶段一（下）】（十万字博文 保姆级讲解）—Matplotlib—数据可视化进阶—常用视图（3）（十一）
数据分析三剑客【AIoT阶段一（下）】（十万字博文 保姆级讲解）—Matplotlib—数据可视化进阶—常用视图（4）（十二）
数据分析三剑客【AIoT阶段一（下）】（十万字博文 保姆级讲解）—Matplotlib—数据可视化进阶（十三）
敏捷数据分析方法论革命来袭