DCS存储操作系统成为浪潮高端存储的“智慧引擎”

简介:
   存储操作系统:实现数据“逍遥游”

《逍遥游》是《庄子》一书的第一篇,作者用天马行空的想象描述了一种理想状态:“乘天地之正,驭六气之变,以游无穷”,即顺应天地万物的本性,把握环境的变化,不受任何束缚,自由自在地活动,实现“逍遥”的境界。《逍遥游》很能代表庄子的哲学思想,因其寓哲理于离奇想象,写的奇伟瑰丽而为人称道。

无独有偶,云计算、大数据时代,随着数据量、应用数量和使用者数量的增加,企业存储系统面临着扩容不易、效率不高、管理复杂和可用性差等难题,成为困扰高端存储发展的一道道“绳索”。如何突破限制,将存储操作系统打造为高端存储的“智慧引擎”,统筹管理整个存储系统的软硬件资源,实现数据的“逍遥”流动,发挥出高端存储设备应有功能、性能、可靠性,成为存储厂商技术实力的核心展现。

操作系统大家都很熟悉,是一种特殊的系统软件,它负责管理整个计算机系统的软硬件资源,一个良好的操作系统对计算机至关重要。同理,存储操作系统就是存储系统中负责管理所有存储资源的系统软件,它对于存储设备的可靠性、功能、性能起决定性作用。

很多存储厂商都有自己的存储操作系统,如NetApp的统一存储操作系统Data ONTAP,EMC Symmetrix的存储操作系统Enginuity,华为的虚拟化存储操作系统XVE等。而存储操作系统对存储系统的市场竞争力有很大影响,比如说Data ONTAP在设计之初即采用统一存储的设计理念,通过WAFL融合了文件系统和块设备层,同时在底层RAID技术、快照技术等关键点上具有创新性的设计,使Data ONTAP成为业界最优秀的存储操作系统。NetApp凭借这款先进的存储操作系统快速推出产品,成为存储市场的三强之一。

DCS,打造高端存储核心竞争力

如今,浪潮自研的DCS(Data Control System)存储操作系统,是浪潮高端存储的技术基石,存储系统的各种高级软件功能都运行在DCS存储操作系统之上;今后DCS将进一步迁移到浪潮全系列的存储系统上。如下是DCS存储操作系统的架构图。

DCS存储操作系统示意图

在常规软件层,DCS存储操作系统是存储系统配置管理、远程复制、快照、克隆、服务质量管理、监控与告警、存储虚拟化等软件子系统的平台,为高端存储提供丰富的增值功能。

在DCS操作系统层,DCS具备统一存储资源管理、多协议主机接口、全局高速共享缓存、智能存储资源池、高速互联通信、全局资源调度等功能。

而在存储硬件层,DCS可以兼容多种平台。

整体上DCS实现了真正的虚拟化设计,重点在稳定性、实时性、可靠性、管理部署等方面进行了优化,打造浪潮高端存储的四大核心竞争力。

No.1实时响应,业务效率提升

存储系统的实时性是关键,计算服务器发送过来的IO数据必须及时得到处理,否则将造成IO超时,进而影响前端计算业务。因此,对于存储系统来说,存储操作系统的实时性必须得到有效的保障。针对存储系统的特点,DCS操作系统在线程调度方面做了特殊的优化,保证任务运行的实时性。

在优化线程调度算法时,DCS存储操作系统特别针对多处理器进行了相关优化。主要考虑到存储系统性能更多的还是需要硬件的支持,因此2路或者4路控制器上的线程调度优化显得尤为必要。多处理器实时任务调度研究主要包含三个方面的问题:实时任务的分派策略、调度算法和可调度性判定边界。这三个方面都会对系统的实时性和性能产生明显的影响,因此DCS存储操作系统对其分别进行了优化。

No.2安如磐石,捍卫数据资产

可靠性是存储的基石,只有稳定可靠的存储才能为用户持续的提供服务,保证用户数据的安全。DCS存储操作系统在可靠性方面做了诸多优化和改进,具体包括磁盘系统的优化、RAID系统的优化和缓存系统的优化等等。从多个方面保证存储操作系统本身的可靠性,进而为存储系统提供了可靠的保障。

磁盘子系统方面,DCS采用多个层次增加磁盘子系统的可靠性。首先,针对存储系统后端链路的不可靠性,采用链路故障判定算法。该算法可以有效的处理后端链路的闪断问题,保证对后端磁盘阵列访问的连续性。其次,针对磁盘坏块/坏道问题,采用跳跃磁盘扫描和修复算法。该算法通过对磁盘特定区域进行测试验证,将损坏的磁盘通过校验码进行恢复,并重映射到磁盘的其它区域。同时本算法可以根据磁盘的负载情况动态调整扫描的频度。再次,针对磁盘寿命问题,采用磁盘智能替换算法。该算法通过统计磁盘坏块数量和使用时间等参数决定是否替换磁盘,当满足要求时,该算法将在不影响前端业务的情况下将旧磁盘的数据迁移到新的磁盘上,实现磁盘的替换。

No.3全局加速,数据自动迁移

为了提供高性能的存储系统,DCS存储操作系统在两个方面进行了高性能相关设计,分别是高性能存储池和高性能缓存。高性能存储池可以将数百块硬盘整合成为一个容错的大存储池,再提供给上层使用。高性能缓存提供大容量的缓存系统,降低访问后端存储的概率,从而提高计算节点访问存储的性能。

存储池层将磁盘数据分块,按指定单条带成员盘(块)数、负载均衡、离散分布原则进行组织,可灵活更改条带块。当单个盘失效时,存储池层可以智能计算热备块在池中的分布,使用多块成员盘进行重构,避免传统单盘写入性能瓶颈造成RAID重构时间过长带来的数据可靠性风险。在可靠分布式RAID基础上,将数据进一步分块虚拟化,形成逻辑卷,使用分布式和多副本元数据组织。同时,存储池层还实现了分级混合存储,可以构建基于SSD和普通机械硬盘的混合存储池,通过SSD硬盘实现更高性能的存储池。

高性能缓存通过全局共享缓存实现,采用全局共享缓存的方式可以实现缓存空间的共享,从而提高缓存命中率,提升计算节点访问存储的性能。

No.4智慧管理,释放存储潜力

传统的存储系统中,当计算节点需要一部分存储空间的时候,往往是预先从后端存储系统中划分出一部分足够大的空间。这个空间往往不是被马上用掉,而是需要一个月甚至是更长时间才能用到的空间;但由于这部分存储空间已经被预留了出来,其它计算节点将无法利用这些已经部署但闲置的存储容量。这种情况下,尤其是有多个计算节点连接统一存储的情况下,就会预分配很多空间,进而造成存储空间的极大浪费。

在DCS存储操作系统的存储池层,采用一种基于自动精简配置的资源分配算法。在初始阶段,计算系统会感知到一个与传统存储相同的存储空间,但该空间为虚拟空间,并不占用实际的存储资源;存储资源不是即刻被分配给计算节点,而是根据实际使用量逐步分配,从而实现空间的高效利用。

不滞于物,以游无穷

一言以蔽之,存储系统,尤其是高端存储,往往服务于大型企业的核心业务系统,如何保证关键数据不丢失、全年业务不中断,是高端存储的终极使命,对企业生存和发展至关重要;DCS可以集数据管理功能、可用性和出色效能表现与一体,帮助客户提高存储架构效率,实现高效的访问数据和不受限制的发展业务,实现数据“随需而用、不滞于物”的逍遥境界。

如今,浪潮存储发展迅猛,H1市场增长149.3%,DCS已在高端存储系统上规模化应用。在DCS等核心技术的支持下,如同Data ONTAP推动NetApp成为全球领先的存储厂商那样,浪潮将在高端存储市场有所建树。



作者:佚名
来源:51CTO
目录
相关文章
|
人工智能 安全 Anolis
打造更 AI 的操作系统 《龙蜥+超级探访》第三期走进浪潮信息
且看龙蜥社区如何联合浪潮信息向更高层次的操作系统智能化迈进?
打造更 AI 的操作系统 《龙蜥+超级探访》第三期走进浪潮信息
|
人工智能 运维 安全
专访浪潮信息:AI 原生时代,浪潮信息引领服务器操作系统创新 全面贡献龙蜥社区
分享了关于 AI 原生化趋势下服务器操作系统进化的思考,以及浪潮信息在龙蜥社区开源贡献的思路、成果与未来技术发展规划。
专访浪潮信息:AI 原生时代,浪潮信息引领服务器操作系统创新 全面贡献龙蜥社区
|
人工智能 安全 数据安全/隐私保护
移动应用与系统:构建现代数字生态的双引擎在数字化浪潮席卷全球的今天,移动应用与系统作为连接用户与数字世界的重要桥梁,正发挥着越来越重要的作用。它们不仅改变了人们的生活方式,也推动了各行各业的创新与发展。本文将深入探讨移动应用开发的最新趋势、移动操作系统的演进历程以及两者如何共同塑造我们的未来。
随着智能手机的普及和移动互联网的快速发展,移动应用已成为人们日常生活中不可或缺的一部分。从社交媒体到移动支付,从在线教育到远程办公,移动应用无处不在,极大地丰富了我们的生活体验。与此同时,移动操作系统也在不断进化,为应用提供了更加稳定、高效的运行环境。本文旨在分析当前移动应用开发的热点技术、探讨移动操作系统的未来发展方向,并展望这两者如何相互促进,共同推动数字经济的繁荣。
|
运维 安全 Linux
计算机架构“寒武纪爆发”,操作系统进化迸发中国浪潮
计算机架构“寒武纪爆发”,操作系统进化迸发中国浪潮
|
人工智能 Cloud Native Linux
云智融合浪潮之下,中国操作系统逆势向上
云智融合浪潮之下,中国操作系统逆势向上
|
Cloud Native Devops 数据库
云原生架构:未来软件开发的引擎深入理解操作系统的虚拟内存管理
【7月更文挑战第30天】在这篇文章中,我们将深入探讨云原生架构的概念,以及它如何改变软件开发的世界。我们将从云原生的基本概念开始,然后深入到它的关键技术和实践,最后讨论它对软件开发的未来影响。无论你是软件开发者,还是IT专业人士,这篇文章都将为你提供深入理解和掌握云原生架构的重要信息。 【7月更文挑战第30天】在数字世界的构建中,虚拟内存是操作系统不可或缺的一环。本文将探索虚拟内存的核心概念、工作机制及其对现代计算环境的重要性,同时揭示其背后的技术细节和面临的挑战。
358 3
|
人工智能 Cloud Native 数据库
“云+AI”浪潮下,阿里云&龙蜥携手打造智算时代最佳服务器操作系统
AI 时代的来临,也推动着云计算发展迎来第三次浪潮。
|
存储 算法 固态存储
半导体存储品牌企业江波龙加入龙蜥社区,完成与 Anolis OS 适配
江波龙与 Anolis OS 的成功适配,进一步验证了 Anolis OS 能满足对存储容量灵活性和系统整体稳定性的高标准要求,可以为广大用户提供优质、高性能产品。
|
边缘计算 运维 安全
操作系统新浪潮问题之浪潮信息在标准制定方面的成果内容如何解决
操作系统新浪潮问题之浪潮信息在标准制定方面的成果内容如何解决
244 0
|
人工智能 Cloud Native 大数据
操作系统新浪潮问题之龙蜥社区SIG的主要创新前沿领域内容如何解决
操作系统新浪潮问题之龙蜥社区SIG的主要创新前沿领域内容如何解决
233 0

热门文章

最新文章

推荐镜像

更多