直播间直达链接：（回看链接）
时间
7月31日19:00
主讲人：
辰山，阿里巴巴计算平台事业部 EMR 高级开发工程师，目前从事大数据存储方面的开发和优化工作
简介：
在数据上云的大背景下，存储计算分离逐渐成为了大数据处理的一大趋势，计算引擎需要通过网络读写远端的数据，很多情况下 IO 成为了整个计算任务的瓶颈，因而数据缓存成为此类场景下的一个重要的优化手段。本次分享将介绍 Spark 在数据缓存上的一些做法，并将介绍 EMR 自研的 Jindo 存储系统在数据缓存上的应用。 
7月31日Spark钉钉群直播【Apache Spark 在存储计算分离趋势下的数据缓存】
2019-07-29
1229
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
在数据上云的大背景下，存储计算分离逐渐成为了大数据处理的一大趋势，计算引擎需要通过网络读写远端的数据，很多情况下 IO 成为了整个计算任务的瓶颈，因而数据缓存成为此类场景下的一个重要的优化手段。本次分享将介绍 Spark 在数据缓存上的一些做法，并将介绍 EMR 自研的 Jindo 存储系统在数据缓存上的应用。
目录
相关文章
|
存储
API
钉钉开放平台的存储类API无法提交文件的问题
存储类API： 调用”提交文件”时返回，会返回code 400， 提示 uploadkey 无效。
code: 400, Specified parameter uploadKey is not valid. request id: 768D2EE8-A32E-7A04-A593-63EB0037E431
uploadkey 确实是使用“获取文件上传信息”正常的获得，并且在调用“提交文件”接口前，使用“添加权限”接口赋予了访问权限。
212
0
0
|
存储
专有云
对象存储
|
存储
负载均衡
专有云
|
JavaScript
物联网
使用TDengine国产时序数据库存储能耗数据并通过钉钉机器人接收报警信息
使用TDengine存储能耗数据并接收报警实现目标：1、边缘侧应用采集电表数据2、通过TDengine存储能耗时序数据3、使用钉钉机器人控件发送消息4、实时监测电压波动报警阀值，通过阿里钉钉发送报警消息场景介绍。
9978
0
2
|
监控
物联网
机器人
钉钉机器人调用函数计算实现serverless web服务：传统门禁的简单改造，懒惰癌的福音
本文通过钉钉机器人调用函数计算实现的serverless web服务，打通物联网平台，和树莓派实时通讯。实现了将原有传统的磁吸门禁，改造成可以由钉钉来控制开门的简单应用。
2854
0
3
|
缓存
7月31日Spark钉钉群直播【Apache Spark 在存储计算分离趋势下的数据缓存】
在数据上云的大背景下，存储计算分离逐渐成为了大数据处理的一大趋势，计算引擎需要通过网络读写远端的数据，很多情况下 IO 成为了整个计算任务的瓶颈，因而数据缓存成为此类场景下的一个重要的优化手段。本次分享将介绍 Spark 在数据缓存上的一些做法，并将介绍 EMR 自研的 Jindo 存储系统在数据缓存上的应用。
1110
0
0
|
存储
弹性计算
安全
|
移动开发
物联网
Go
|
移动开发
物联网
智能硬件
|
存储
弹性计算
安全
热门文章
最新文章
1
EMR Serverless Spark：结合实时计算 Flink 基于 Paimon 实现流批一体
2
阿里封神谈hadoop生态学习之路
3
分布式快照算法: Chandy-Lamport
4
如何使用Kafka Connect实现同步RDS binlog数据
5
梨视频：基于阿里云E-MapReduce搭建视频推荐系统的实践
6
HIVE MapJoin异常问题处理总结
7
E-MapReduce中Spark 2.x读写MaxCompute数据
8
EMR集群上capacity scheduler的ACL实现
9
数据湖正在成为新的数据仓库
10
使用spark-redis组件访问云数据库Redis
1
阿里云 EMR StarRocks VS 开源版本功能差异介绍
25
2
首批！阿里云完成中国信通院数据智能平台专项测试
47
3
【评测有奖】参加 EMR Serverless Spark 产品评测，赢机械键盘、充电宝等礼品！
49
4
EMR Serverless Spark：结合实时计算 Flink 基于 Paimon 实现流批一体
60030
5
客户案例 | 阿里云向量检索 Milvus 版在识货电商检索场景的应用与实践
183
6
基于阿里云 EMR Serverless Spark 版快速搭建OSS日志分析应用
56415
7
阿里云 EMR Serverless StarRocks3.x，极速统一的湖仓新范式
936
8
阿里云 EMR Serverless Spark 版开启免费公测
543
9
文心大模型的智能体（Agent）平台
297
10
阿里巴巴的通义千问大模型
620