备案控制台

开发者社区

开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 视频 > 正文

Tablestore结合Spark的云上流批一体大数据架构

发布者：开发者说 2019-11-26 11:13:52 1470

开发者说

+关注

视频介绍

传统Lambda架构组件多运维复杂，如何使用一套存储和一套计算来实现流批架构充分享受技术红利？以Delta Lake为代表的新型数据湖方案越来越流行，传统的Lambda架构如何向数据湖架构进行扩展？以及结构化数据结合Delta Lake的最佳解决方案是什么。本次分享将会结合理论讲解和实际场景为您一一解答。

讲师介绍

王卓然，花名琸然阿里云存储服务技术专家

关键词：

apache spark入门

apache spark大数据

表格存储索引

apache spark单机

apache spark安装

相关视频

大数据与机器学习

开源大数据平台 E-MapReduce

+关注

阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

热门文章

热门讨论

阿里封神谈hadoop生态学习之路

现代流式计算的基石：Google DataFlow

如何使用Kafka Connect实现同步RDS binlog数据

JindoFS: 云上大数据的高性能数据湖存储方案

JindoFS解析 - 云上大数据高性能数据湖存储方案

如何在Aliyun E-MapReduce集群上使用Zeppelin和Hue

HIVE MapJoin异常问题处理总结

阿里封神-大数据处理技术漫谈

JindoFS概述：云原生的大数据计算存储分离方案

基于Spark Streaming 进行 MySQL Binlog 日志准实时传输

展开全部

大佬，可以请教下，有没有遇到 com.aliyun.oss

阿里云共享块存储和NAS还有OSS的区别是什么呀

阿里云E-MapReduce的jindodata写数据到oss，是单线程还是多线程阿？

"E-MapReduce这些异常都是什么原因导致的？

请问有人遇到过阿里云E-MapReduce这个问题嘛？

阿里云E-MapReduce Notebook怎么申请试用?

请问hive 的hive-site.xml文件在哪啊

阿里云E-MapReduce中在spark里使用jingdo访问oss，是啥原因？

怎么开通 EMR Doctor 呢？

阿里云E-MapReduce读写 oss 文件时，api 的调用次数和文件层级有关系吗？

展开全部

+关注

开发者说

文章

问答

视频

来源圈子

更多

Apache Spark 中国技术社区

4459

邀请你加入钉钉群聊Apache Spark中国技术交流社区，点击进入查看详情 https://qr.dingtalk.com/action/joingroup?code=v1,k1,X7S/0/QcrLMkK7QZ5sw2oTvoYW49u0g5dvGu7PW+sm4=&_dt_no_comment=1&origin=11。</br> 微信公众号：Apache Spark技术交流社区为 Spark 爱好者提供一个交流技术和传递资讯的平台，在这里你可以掌握大数据计算领域最前沿的资讯，可以与 Spark 技术大牛面对面交流，还有不定期社区福利领取哟～

+ 订阅

相关产品

开源大数据平台 E-MapReduce

文档详情产品详情

相关文章

更多

《Spark大数据处理：技术、应用与性能优化》——第3章 Spark计算模型3.1　Spark程序模型《Spark大数据处理：技术、应用与性能优化》——2.2　Spark集群初试《Spark大数据处理：技术、应用与性能优化》——2.3　本章小结《Spark大数据处理：技术、应用与性能优化》——第2章 Spark集群的安装与部署2.1　Spark的安装与部署《Spark大数据处理：技术、应用与性能优化》——1.4　Spark分布式架构与单机多核架构的异同《Spark大数据处理：技术、应用与性能优化》——1.3　Spark架构《Spark大数据处理：技术、应用与性能优化》——1.2　Spark生态系统BDAS 《Spark大数据处理：技术、应用与性能优化》——第1章 Spark　简　介1.1　Spark是什么 Spark性能优化——和shuffle搏斗 Spark SQL性能优化