开启存储的“轻计算”时代(下) ——阿里云云栖大会Tech insight:存储与轻计算专场

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: 4月22日在深圳举行的云栖大会tech insight技术峰会中,阿里云存储的多位主要产品技术负责人齐聚存储与轻计算专场,与大家一起,分享阿里云存储团队在“大存储,轻计算”中的实践以及展望。

4月22日在深圳举行的云栖大会tech insight技术峰会中,阿里云存储的多位主要产品技术负责人齐聚存储与轻计算专场,与大家一起,分享阿里云存储团队在“大存储,轻计算”中的实践以及展望。

 

David:既省钱又可靠?如何改造企业级大规模系统

 

对于业务量峰谷需求明显的企业级架构,在业务请求峰值突然增大时,消息可靠对业务连续性的影响显著增强,David展示如何利用消息服务赋能用户快速完成系统并上线。

 

a96c2a027b0720598477bbde487fc1876145f0e9

ee4e1138ffcdf83dea308fee512aabcad071b61c

 


应俊:移动社交场景中的数据模型实践

 

媒体,娱乐,社区等等移动社交应用日益丰富,这些应用面临着一些相同的技术问题和挑战。以比较常见的即时消息通讯为例,该场景的功能需求通常包括:群组中的消息需要及时送达到群众的每个人,每条消息推送到每个人的多个移动客户端,客户段之间要保持群组会话状态的同步,一般通过如下的分层技术架构来应对:

ae31b4c5385ef8085da8d27c079abf03299a455d

其中数据存储层特别是海量的消息存储通常使用NoSQL数据存储技术,面临的技术挑战包括:1)消息量数据规模的快速扩展,存储系统要做到无缝的支持;2)应对突发或者持久的高并发访问,同时保证请求的低延时;3)提供高可靠高可用的存储服务。应俊分享了阿里云存储产品中的表格存储的架构和特点以及如何应对这些挑战:

bd1e3e7436e63f10a413298758b90004a5a25f74

2ac0e762604d8bdf36995836a7f4cdae737e0746



雷彪:与存储打通的大数据计算究竟有那些价值?

f336b4c4d696c9c2ec5a44d3a36fbab9b7081311

离线数据处理-用户行为分析:

对页面的浏览,按钮的点击情况进行采集分析。服务端会把这些信息存储在OSS中。定期启动E-MapReduce集群,使用hive脚本进行数据分析。

 

离线数据处理-推荐:

对UGC的内容进行聚类等分析,对用户的行为和属性进行协同过滤等分析这里根据不同的业务场景,应用不同的机器学习算法

 

实时数据处理-监控报警:

通用的,弹性的和灵活的监控系统能够通过异常的情况,用户的请求占比,接口时延,终端分布这些信息来发现问题,改善业务

 

离线和实时数据混合处理-商品推荐:

将购物网站的数据进行离线的推荐计算,准备离线推荐数据之后跟用户产生交互,根据交互结果对离线推荐进行修正。通过将离线的数据和在线数据结合,对用户进行更加精准的推荐。

 


Mars:数据类型决定存储类型

 

对于需要随机读写、大容量、标准posix接口、多共享、高吞吐、高性能的应用,只有文件存储才能满足,阿里云文件存储NAS用于解决文件存储用户的核心诉求,目前正在公测中。详见:https://www.aliyun.com/product/nas


 

416797b2e7ed1e1448f31a71461a64915ea3378d

ff81a41116dfda336e27123856b9aa823d7136d3

云存储更多解决方案,请关注https://www.aliyun.com/solution/storage

 

目录
相关文章
|
21天前
|
存储 调度 块存储
阿里云连续两年斩获全球存储顶会FAST最佳论文
阿里云连续两年斩获全球存储顶会FAST最佳论文
363 0
|
7天前
|
存储 Kubernetes Cloud Native
【阿里云云原生专栏】云原生容器存储:阿里云CSI与EBS的高效配合策略
【5月更文挑战第29天】阿里云提供云原生容器存储接口(CSI)和弹性块存储(EBS)解决方案,以应对云原生环境中的数据存储挑战。CSI作为Kubernetes的标准接口简化存储管理,而EBS则提供高性能、高可靠性的块存储服务。二者协同实现动态供应、弹性伸缩及数据备份恢复。示例代码展示了在Kubernetes中使用CSI和EBS创建存储卷的过程。
58 3
|
13天前
|
存储 弹性计算 大数据
【阿里云弹性计算】阿里云ECS在大数据处理中的应用:高效存储与计算实践
【5月更文挑战第23天】阿里云ECS在大数据处理中发挥关键作用,提供多样化实例规格适应不同需求,尤其大数据型实例适合离线计算。通过集成分布式文件系统如OSS,实现大规模存储,而本地存储优化提升I/O性能。弹性扩容和计算优化实例确保高效运行,案例显示使用ECS能提升处理速度并降低成本。结合阿里云服务,ECS构建起强大的数据处理生态,推动企业创新和数字化转型。
37 0
|
16天前
|
存储 弹性计算 Cloud Native
AutoMQ:如何基于阿里云计算与存储产品实现云原生架构升级
AutoMQ:如何基于阿里云计算与存储产品实现云原生架构升级
|
16天前
|
存储 弹性计算 监控
【阿里云弹性计算】深入阿里云ECS配置选择:CPU、内存与存储的最优搭配策略
【5月更文挑战第20天】阿里云ECS提供多种实例类型满足不同需求,如通用型、计算型、内存型等。选择CPU时,通用应用可选1-2核,计算密集型应用推荐4核以上。内存选择要考虑应用类型,内存密集型至少4GB起。存储方面,系统盘和数据盘容量依据应用和数据量决定,高性能应用可选SSD或高效云盘。结合业务特点和预算制定配置方案,并通过监控应用性能适时调整,确保资源最优利用。示例代码展示了使用阿里云CLI创建ECS实例的过程。
89 5
|
21天前
|
存储 Cloud Native 对象存储
AutoMQ:如何基于阿里云计算与存储产品实现云原生架构升级
AutoMQ[1] 是新一代基于共享存储架构实现的云原生 Kafka。得益于其存算分离的共享存储架构,通过和阿里云合作,深度使用阿里云可靠、先进的云服务如对象存储OSS、块存储 ESSD、弹性伸缩ESS以及抢占式实例实现了相比 Apache Kafka 10倍的成本优势并且提供了自动弹性的能力。
83636 5
AutoMQ:如何基于阿里云计算与存储产品实现云原生架构升级
|
21天前
|
存储 调度 块存储
十二年磨一剑:三代架构演进,打造高性能、低成本的块存储!
上周,全球计算机存储顶会USENIX FAST 2024 在美国加州圣克拉拉召开,继去年获得国内首个FAST最佳论文奖后,凭借在分布式块存储上的创新,阿里云新作再次斩获FAST大会最佳论文奖。这也是国内唯一一家连续两年获得FAST最佳论文奖的科技公司。
104951 104
|
21天前
|
存储 弹性计算 NoSQL
阿里云突发!上百种云产品大规模降价,云服务器、云数据库、存储价格下调
阿里云突发!上百种云产品大规模降价,云服务器、云数据库、存储价格下调
124 2
|
21天前
|
存储 弹性计算 NoSQL
阿里云降价背后的“焦虑”,云服务器、数据库、存储百种云产品大降价!
阿里云降价背后的“焦虑”,云服务器、数据库、存储百种云产品大降价!
129 0
|
21天前
|
存储 弹性计算 NoSQL
2024阿里云服务器、数据库、存储等全线产品平均降价 20%
2024年最新阿里云降价,立即生效!百款产品直降,平均降幅20%,阿里云希望通过此次大规模降价,让更多企业和开发者用上先进的公共云服务,加速云计算在中国各行各业的普及和发展。这次降价包括云服务器ECS、对象存储OSS、云数据库都降价了,真降价,直降价:百款产品直降,平均降幅20%,阿里云百科分享阿里云2024年降价信息汇总表