Hitachi Vantara领跑对象存储,做客户海量数据背后的驱动引擎

本文涉及的产品
对象存储 OSS,20GB 3个月
文件存储 NAS,50GB 3个月
对象存储 OSS,内容安全 1000次 1年
简介: Hitachi Vantara领跑对象存储,做客户海量数据背后的驱动引擎

我们是否都有同样的感受,今天世界的变化速度正越来越快。科技的进程正以几何级数的加速度改变着世界,随着科技的发展,我们对不可预知的未来,也有了更多的期待。

 

回顾过去两年,似乎整个行业都奔跑在人工智能的风口之上,而人工智能之所以在发展了几十年后才被看作是公认的未来,背后的主要原因还是数据和计算力的快速发展,带来了人工智能在应用层的全面爆发。

 

而在连接层,5G将成为划时代的分水岭。2018年的5G试点表现非常成功,为2019到2020年的全面商用打下了坚实的基础。


image.png


无论是人工智能还是5G的大趋势,无疑都推动数据,尤其是视频、音频和图片等非结构化数据的再一次爆发,也因此引发了对象存储的市场机会。作为海量数据的驱动引擎,对象存储将会面对怎样的时代?

 

对象存储崛起,源于数据的大爆炸

 

其实,对象存储并不是一个很新的概念,对象存储这个概念最早可以追溯到20世纪90年代中期,商业产品到2003年的时候就出现了。但对象存储的市场爆发,则是在最近的两年当中。

 

最核心的原因就是非结构化数据的爆发,据IDC预计,到2020年,总体企业的数据量将达到44ZB,其中80%的数据将会是非结构化数据。

 

但是过去的企业级存储主要有两大类:分别是NAS(网络接入存储)和SAN(存储区域网络)。这两大传统企业存储都有一个共同的特征,就是只能垂直扩展,它在管理、成本、容量和性能方面满足不了海量非结构化数据的存储需求。为了满足非结构化数据的存储需求,整个企业级存储市场慢慢从“垂直扩展”向“水平扩展”转变,形成了新一代企业级存储,包括块存储、文件存储和对象存储。

 

而对象存储采用了“对象”数据组织,克服了 NAS与 SAN 的不足,使它既有“块”接口的快速,又有“文件”接口的便于共享,提供具有高性能、高可靠性、跨平台以及安全的数据共享的存储体系结构。成为了很多企业在面对海量数据时的首选。

 

正因为对象存储可见的市场前景,所以很多的科技巨头都聚焦了这个市场,Hitachi Vantara、IBM、EMC、Nutanix、VMware,包括云计算公司AWS、微软和阿里云都推出了对象存储的产品。

 

再从数字化转型的维度看,对象存储让企业能够以更低的搭建来访问海量数据,同时避免增加与高容量磁盘相关的RAID重建时间。可想而知,未来企业用户对长期处于在多云环境和混合云的状态下,而对象存储作为其私有云的主要部署方向,会成为一个主流的标准。

 

如何应对海量数据的“存、管、用”?

 

在互联网时代,数据扮演了非常重要的角色,企业要做数字化转型必须从数据开始,比如一切与消费者有关的信息被数字化后,才能得以实现商业化应用。而企业在数字化转型的进程中将会面临更复杂的海量数据的难题。


image.png


以咪咕视讯为例,作为中国移动手机视频基地,其提供包括手机移动视频、在线视频等业务,随着移动互联网的快速发展,面临的外部压力越来越多,特别是爱奇艺、优酷等互联网公司的竞争,咪咕计划三年内做中国最好的视频交互平台。

 

过去咪咕视讯在存储结构上主要是以NAS为主,经过这些年不断的扩展,已经到了一个相当庞大的规模,面对每年PB级增长的长视频和短视频业务有些力不从心。除此之外,跨地域数据存取、视频元数据分析等难题,NAS文件存储在运营商视频类业务中也显得更加乏力。因此能够管理海量非结构化数据,大规模的横向扩展能力,适应互联网场景使用的对象存储成了不二的选择。

 

Hitachi Vantara为咪咕视讯改造后的媒资与发布平台采用NAS+HCP两层架构,由HCP对象存储管理所有的数据资产。同时,基于HCP多站点模式,将内容分发到三站点,通过三站点纠删方式做异地容灾保护,并基于用户行为的大数据分析,制定主动推送策略。

 

在咪咕视讯中的创新之处,Hitachi Vantara基于无限扩展的对象存储的平台建立,CDN+对象存储,并简化了文件管理、提高工作效率。帮助用户在兼顾传统IT基础架构平台的同时,根据企业应用的独特需求,逐步实现IT转型和运维模式调整。


image.png


在医疗领域,浙江大学附属第一医院是一家大型三甲医院。随着医疗设备数量的不断增加和医疗设备出片像素的翻倍增长,到2023年医院的PACS影像数据规模可能达到750-1000TB,如何管理近PB海量影像数据成为医院IT技术部门最为头痛的工作挑战。同时,浙大一院的PACS系统还面临性能问题,需要采用新型存储架构去长期轻松应对这些挑战。

 

在选择了Hitachi Vantara进行PACS系统改造之后,浙大一院采用新型存储架构取代之前的老式架构,获得了明显的性能改进:首先是更快阅片速度:将最新的影像片放在高速NAS存储中,在高速NAS中利用更强大的文件处理性能、配置了适量闪存硬盘,达到提升医生调片速度的目的;其次是实现在线归档:每天产生的影片自动通过存储底层复制到影像归档平台,无需借助PACS软件的归档功能,不影响PACS服务器的性能,不需要任何人工介入完成归档;最后是更好地保护PACS影像:影像归档平台不再用普通的SAN存储或者NAS存储,而是采用专门用于海量非结构化数据存储的对象存储。

 

不难发现,无论是咪咕视讯还是浙大一院,他们在面对海量数据的管理压力时,在存和管两方面需要通过对象存储来解决实际问题,而Hitachi Vantara则在存和管的基础之上,上升到了“用”,不仅对业务产生了可见的价值,也通过对象存储的智能化部署,帮客户实现了数字化转型。除了这两个典型客户之外,Hitachi Vantara还在阳光保险和中国移动,完成了对象存储解决方案的落地。

 

对象存储领导力=技术创新+行业底蕴

 

这些实际的客户案例,可以从侧面反映出Hitachi Vantara在对象存储市场的竞争力,同时各大调研机构也给予了Hitachi Vantara极高的评价。

 

在今年初,Hitachi Vantara HCP成功入围Gartner发布的《2018对象存储关键能力研究报告》。这突显了Hitachi Vantara的强大实力,以及在内容产品组合方面的持续投资和创新能力。


image.png


同时,不久前Hitachi Vantara凭借HCP解决方案在《IDC MarketScape:全球对象存储2018年厂商评估》中入选领导者象限,这已是Hitachi Vantara第三次入选该领导者象限。IDC 的报告指出:“Hitachi Vantara最大的优势在于通过紧密集成的产品组合、技术和渠道合作伙伴生态系统,其一直保持紧跟市场需求变化的愿景。此外,Hitachi Vantara已在使用HCP产品组合来支持新的工作负载方面取得了重要进展,例如对垂直市场中的结构化数据、非结构化数据以及媒体流数据进行分析。”

 

Gartner和IDC不约而同地将Hitachi Vantara列入对象存储领导者的行列,这是对Hitachi Vantara在对象存储技术实力的最客观的评价。

 

在9月27日,Hitachi Vantara在NEXT 2018大会上宣布为Hitachi Content Platform (HCP) 产品组合推出多项更新。这些更新进一步扩展了数据治理功能、优化云并现代化文件服务,帮助企业在日益复杂的多云环境中可靠治理和保护其数据。HCP产品组合的增强致力于帮助企业在从数据中心到云端、再到边缘的整个环境中充分利用数据,并将其应用到当今数据驱动的数字化业务环境中,从而实现卓越业务成效。

 

客观的说,过去多年对存储技术创新的专注,是Hitachi Vantara领跑对象存储市场的底蕴,而大量典型用户的信任,则凸显了Hitachi Vantara对行业的理解,以及对客户数字化转型的强大实力,而Hitachi Vantara自身对技术的不断创新,和优化则让这家公司成为了名副其实的企业客户面对海量数据时的驱动引擎。

相关实践学习
借助OSS搭建在线教育视频课程分享网站
本教程介绍如何基于云服务器ECS和对象存储OSS,搭建一个在线教育视频课程分享网站。
相关文章
|
存储 运维 监控
【2019 云栖大会】对象存储海量数据管理和应用最佳实践
2019 云栖大会"下一代云存储技术与最佳实践专场",分享“对象存储海量数据管理和应用最佳实践” 议题,重点介绍对象存储 OSS 的架构原理、数据管理、最佳实践。
4354 0
|
5月前
|
机器学习/深度学习 人工智能 专有云
人工智能平台PAI使用问题之怎么将DLC的数据写入到另一个阿里云主账号的OSS中
阿里云人工智能平台PAI是一个功能强大、易于使用的AI开发平台,旨在降低AI开发门槛,加速创新,助力企业和开发者高效构建、部署和管理人工智能应用。其中包含了一系列相互协同的产品与服务,共同构成一个完整的人工智能开发与应用生态系统。以下是对PAI产品使用合集的概述,涵盖数据处理、模型开发、训练加速、模型部署及管理等多个环节。
|
1月前
|
分布式计算 Java 开发工具
阿里云MaxCompute-XGBoost on Spark 极限梯度提升算法的分布式训练与模型持久化oss的实现与代码浅析
本文介绍了XGBoost在MaxCompute+OSS架构下模型持久化遇到的问题及其解决方案。首先简要介绍了XGBoost的特点和应用场景,随后详细描述了客户在将XGBoost on Spark任务从HDFS迁移到OSS时遇到的异常情况。通过分析异常堆栈和源代码,发现使用的`nativeBooster.saveModel`方法不支持OSS路径,而使用`write.overwrite().save`方法则能成功保存模型。最后提供了完整的Scala代码示例、Maven配置和提交命令,帮助用户顺利迁移模型存储路径。
|
4月前
|
存储 机器学习/深度学习 弹性计算
阿里云EMR数据湖文件系统问题之OSS-HDFS全托管服务的问题如何解决
阿里云EMR数据湖文件系统问题之OSS-HDFS全托管服务的问题如何解决
|
5月前
|
消息中间件 分布式计算 DataWorks
DataWorks产品使用合集之如何使用Python和阿里云SDK读取OSS中的文件
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
5月前
|
存储 运维 安全
阿里云OSS的优势
【7月更文挑战第19天】阿里云OSS的优势
242 2
|
5月前
|
存储 API 开发工具
阿里云OSS
【7月更文挑战第19天】阿里云OSS
207 1
|
5月前
|
存储 弹性计算 对象存储
预留空间是什么?阿里云OSS对象存储预留空间说明
阿里云OSS预留空间是预付费存储产品,提供折扣价以锁定特定容量,适用于抵扣有地域属性的Bucket标准存储费用及ECS快照费。通过购买预留空间,如500GB通用预留+100GB标准-本地冗余存储包,用户可优化成本。
228 4
|
5月前
|
人工智能 对象存储
【阿里云AI助理】自家产品提供错误答案。阿里云OSS 资源包类型: 下行流量 地域: 中国内地通用 下行流量包规格: 300 GB 套餐: 下行流量包(中国内地) ,包1年。那么这个是每月300GB,1年是3600GB的流量;还是1年只有300GB的流量?
自家产品提供错误答案。阿里云OSS 资源包类型: 下行流量 地域: 中国内地通用 下行流量包规格: 300 GB 套餐: 下行流量包(中国内地) ,包1年。那么这个是每月300GB,1年是3600GB的流量;还是1年只有300GB的流量?
138 1
|
6月前
|
SQL 分布式计算 DataWorks
DataWorks产品使用合集之如何将CSV文件从阿里云OSS同步到ODPS表,并且使用列作为表分区
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
DataWorks产品使用合集之如何将CSV文件从阿里云OSS同步到ODPS表,并且使用列作为表分区