【飞天存储服务月报】2018年6月刊

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
对象存储 OSS,20GB 3个月
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
简介: 2018云栖大会上海峰会上,阿里云和115科技共同宣布完成全球互联网史上规模最大的公共云数据迁移,总量超过100PB。同时,整个过程仅耗时45天,刷新了百PB级数据公共云迁移的新纪录,打破AWS用时3个月完成70PB数据迁移记录,成为全球唯一。

【重点新闻】

1、产品降价:阿里云对象存储OSS刷新行业最低价

6月7日,在2018云栖大会·上海峰会上,阿里云宣布云存储产品开启新一轮降价,其中对象存储OSS产品价格下调了18.9%,刷新了云存储的全网最低价,表格存储TableStore按量读写及资源包最高下调50%。调价后,对象存储OSS标准型的最低售价为0.12元/GB/月,购买500TB存储资源包相当于用户每月最多可节省7000多元。此番调价将进一步扩大云存储对线下存储的竞争优势。

lALPBY0V45XxyT7M_M0DgQ_897_248_png_620x10000q90g

2、耗时仅45天!全球互联网史上规模最大的公共云数据迁移完成

在2018云栖大会上海峰会上,阿里云和115科技共同宣布完成全球互联网史上规模最大的公共云数据迁移,总量超过100PB。同时,整个过程仅耗时45天,刷新了百PB级数据公共云迁移的新纪录,打破AWS用时3个月完成70PB数据迁移记录,成为全球唯一。大会现场还原了用闪电立方迁移115数据中心的全过程:2分钟内就完成了2TB数据的安全传输过程。与此同时,阿里云推出了闪电立方Mini版,可提供单台40TB的数据迁移能力,图形化界面,引导式服务体验。

lADPBbCc1eNgbpnNBp7NDic_3623_1694_jpg_620x10000q90g

3、Workshop实操小课堂:小微金融业务跨平台数据共享与处理

近年来,各类小微金融创新背后是各种复杂的数据采集、交换以及构建的过程。在云栖大会上海峰会上,阿里云函数计算、对象存储OSS、表格存储TableStore、日志服务团队共同以一个第三方支付业务的风控场景为案例,演示如何通过阿里云产品解决核心数据互通的痛点,通过Serverless架构应对业务增长,与各计算分析引擎支持建立风控平台对机构和用户进行服务。

lADPBbCc1d0BkWbNAljNAyA_800_600_jpg_620x10000q90g

4、线下活动:LC3大会—开源数据湖存储专场

6月25日,由Linux 基金会举办的LC3开源技术大会在北京国家会议中心举办,LC3分别是指:LinuxCon、ContainerCon 及 CloudOpen 。在此次大会上的飞天技术汇专场,阿里云存储团队以开源数据湖为专场议题,贡献了《基于飞天的Lustre高可用高性能架构解析》《高性能网络技术下的阿里云盘古分布式存储技术变革》《大规模无服务器计算平台的挑战与实践》《Kubernetes下日志采集、存储与处理技术实践》、《开源大数据生态下的高性能分布式文件系统DFS》等五个主题分享。

lADPBbCc1gZ6b2rNBNrNBng_1656_1242_jpg_620x10000q90g

【新品集合】

1、混合云备份服务商业化

阿里云混合云备份(HBR)是一种简单且具有成本效益的备份即服务 (BaaS)。它可以为用户在数据中心、远程和分支机构、以及云上ECS主机的数据提供保护。混合云备份采用集成的全局客户端重复数据消除技术,能够有效降低网络带宽使用,快速完成数据全备份,压缩备份数据所需存储空间,确保用户数据能快速安全高效地备份到云上。
混合云备份支持VMware虚拟机镜像备份,用户可以在VMware平台上方便地部署HBR for VMware,将虚拟机镜像备份上云,避免了传统备份方案复杂的备份软件部署,存储资源规划,异地备份保护等难点。
混合云备份已经正式开始对用户提供商业化服务,收费项目包括保护终端授权费,云备份库空间使用费和备份数据恢复下行流量费,与传统备份方案相比,能为用户节约高达70%的总体方案成本。

2、中国首个混合云大数据双活容灾(HDR for Hadoop)发布

Hadoop集群的数据容灾一直以来是数据保护的一个难点,传统的基于快照+distcp复制技术,RPO都在小时到天级别,无法称为真正意义上的容灾。同时,灾备集群的资源闲置会产生极大浪费。HDR For Big Data是国内首个支持混合云架构下Hadoop集群双活容灾的方案,用户可以在部署于两个数据中心的Hadoop集群之间建立双向复制。在实现数据容灾的同时,两个集群可以独立运行不同的业务,实现集群双活,避免资源浪费。另外,HDR for Big Data还可以允许用户直接将Hadoop集群数据实时迁移至阿里云对象存储OSS,实现秒级RPO的数据备份和迁移。

3、函数计算发布CDN触发器功能,提高用户开发效率

阿里云函数计算正式推出 CDN 触发器,允许用户编写函数快速处理 CDN 的各类事件,解决了 CDN 用户在数据预热、数据刷新、数据封禁、访问日志处理等高需求场景下的痛点,大大提高了用户的开发效率。利用该功能,CDN 在预热和刷新用户数据后,会立即触发用户函数处理相关事件,避免用户不断轮询列表查询最新状态;当在 CDN 上发现违禁内容时,会立即触发用户函数删除源站资源,不需要等待 CDN 后台响应;日志文件生成后,会立即触发函数及时转存或者下载日志处理,相比之前,减少了 70% 日志下载的时间。

4、对象存储OSS Python SDK支持客户端加密,充分保障数据安全

阿里云对象存储OSS在支持Https、服务端加密的基础之上,最新发布了客户端加密功能,提供更丰富的数据安全保护能力。
首先,用户可以在数据发送至对象存储OSS前,先在本地通过OSS SDK将数据加密,再通过Https传输到OSS。同时,用户将数据从对象存储OSS下载到本地后,再通过OSS SDK进行解密,确保数据在传输过程、持久化阶段都处于加密状态。
此外,对象存储OSS客户端加密支持信封加密技术,并支持KMS托管用户主密钥和用户自主管理密钥两种密钥管理模式,满足用户对数据安全的更高要求。

5、日志查询分析支持MySQL数据源联合查询功能发布

在游戏运营、用户行为、网络等分析场景中,都会需要涉及到静态数据(例如道具属性、人员信息、硬件信息等),在过去离线计算方案下,需要复杂同步且至少分钟级以上的分析查询延时。通过阿里云日志服务查询分析功能(LogSearch/Analytics),提供MySQL这种存储与计算分离的外部数据源,解决了实时关联查询问题,该功能除了能将延时从分钟降为秒级外,还能解决异构数据源依赖性问题,灵活便捷,减少用户使用负担。

【技术实践】

1、《MySQL执行计划解析》

本文从MySQL的逻辑结构讲解、MySQL查询过程、执行计划的案例三部分重点介绍执行计划的输出参数,帮助用户选择最佳方案。

2、《函数计算中使用Puppeteer的过程分析》

函数计算中使用Puppeteer的过程遇到了代码包太大、依赖动态链接库等问题,文章给出函数计算解决类似问题的通用解决方案。

3、《三分钟学会如何在函数计算中使用Puppeteer》

Puppeteer是一个node库,提供了一组用来操纵Chrome的API,Puppeteer结合函数计算使用,可以快速地构建弹性服务。文章对在函数计算中使用Puppeteer的过程和步骤进行了详细介绍。

4、《10分钟上线-函数计算实现Serverless图片处理服务》

阿里云函数计算是事件驱动的全托管服务,开发者只需编写代码就能快速地开发出弹性高可用的后端系统。文章介绍使用函数计算快速实现图片处理服务的示例,为图片处理提供新思路方案。

5、《Kubernetes中Logtail日志采集CRD配置详解》

日志采集配置默认支持控制台配置方式,同时针对Kubernetes微服务开发模式,提供CRD的配置方式,本文将介绍如何使用kubectl对配置进行管理。

6、《日志服务支持Shard自动分裂》

日志服务的数据模型中,通常使用Shard来控制Logstore吞吐能力。数据量随时会突增,如果不能及时处理,将造成丢失的风险。本文介绍阿里云日志服务提供的Shard自动分裂功能技术实践。

目录
相关文章
|
存储 NoSQL 文件存储
【飞天存储服务月报】2018年7月刊
7月底,2018 Gartner全球云存储魔力象限报告发布,全球前四依然是亚马逊AWS、微软Azure、谷歌GCP和阿里云。与去年相比最大变化是,腾讯云出局,谷歌和阿里云分别跃升领导者和挑战者象限,这是中国云计算厂商首次进入Gartner云存储挑战者象限。
4053 0
|
存储 人工智能 监控
【飞天存储服务月报】2018年8月刊
8月22日,在《混合云存储开启企业上云新路径暨混合云备份容灾方案》发布会上,阿里云存储对外正式发布混合云备份服务和混合云容灾服务,提供云上备份与云容灾的保护能力,客户可实现灾备方案的分钟级部署,有效保护数据并实现业务的连续性。
3332 0
【飞天存储服务月报】2018年8月刊
|
机器学习/深度学习 存储 安全
【飞天存储服务月报】2018年9月刊
2018 杭州云栖大会上,阿里云为客户现场演示了混合云容灾服务-关键业务型(Business Critical Disaster Recovery , 简称 BCDR)上云容灾演练。BCDR 演示完整呈现了将本地服务器上运行的报账系统实时容灾 2 分钟内复制到阿里云,并在现场拔掉硬盘,出现宕机后在云上一分半钟拉起恢复业务的全过程。
3364 0
|
存储 云计算
阿里云产品体系分为6大分类——云计算基础——存储服务——混合云存储
阿里云产品体系分为6大分类——云计算基础——存储服务——混合云存储自制脑图
182 1
阿里云产品体系分为6大分类——云计算基础——存储服务——混合云存储
|
存储
《阿里云产品手册2022-2023 版》——混合云存储
《阿里云产品手册2022-2023 版》——混合云存储
116 0
《阿里云产品手册2022-2023 版》——混合云存储
|
存储 弹性计算 数据挖掘
《阿里云存储手册》——云定义存储CDS
《阿里云存储手册》——云定义存储CDS
421 0
|
存储 人工智能 弹性计算
《阿里云存储手册》——混合云存储
《阿里云存储手册》——混合云存储
236 0
|
存储 容灾
《混合云存储开启企业上云新路径---阿里云混合云备份容灾方案发布》电子版地址
混合云存储开启企业上云新路径---阿里云混合云备份容灾方案发布
182 0
《混合云存储开启企业上云新路径---阿里云混合云备份容灾方案发布》电子版地址
|
存储 运维 监控
【CDS技术揭秘系列 总篇】阿里云的云定义存储来了
全新发布的云定义存储 CDS 和传统的存储阵列、分布式存储、软件定义存储的区别在哪里?阿里云存储团队如何看待将来存储的发展趋势?本文邀请了 CDS 研发团队的核心技术负责人为大家揭开围绕着阿里云 CDS 的种种谜团。
2912 0
|
存储 人工智能 固态存储
从混合云存储看阿里云对下一代企业计算架构的思考
阿里云在2019年最后一个月发布了针对混合云的两款产品:入门级混合云存储阵列SA2100以及混合云CPFS一体机,加上2019年发布的混合云存储阵列中高端产品SA2600、3600、5600以及基于容器的ACK混合云2.0等,阿里云已经为2020年混合云市场的全面激活做好了准备。
从混合云存储看阿里云对下一代企业计算架构的思考