横向扩展的NAS:在混合云中存储的关键

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介:

目前,世界上绝大部分的数据中心仍然在为其存储使用垂直扩展的解决方案,这显然是一个问题。这种传统的存储方法在其设计之初并没有考虑到今天泽字节的数据。现如今的企业组织机构需要比以往任何时候都存储更多的数据,而与此同时,他们还需要在不损害性能的前提下,以一种经济实惠的方式这样做。而软件定义的存储的出现使得横向扩展的存储解决方案成为了一种现实的可能。

另一项相对较新的技术:混合云,则能够使得企业组织机构享有云架构的最大的业务灵活性,这将有助于他们最大限度地提高预算效率和性能目标。简而言之,混合云是一款实用企业内部部署、私有云和公共云服务,在两个平台之间拥有业务流程的云计算环境的混合。

而与任何新的架构一样,部署一款混合云的方法都同时具有其优点和缺点。在本文中,我们将与广大读者朋友们共同讨论一些您所在的企业可以借鉴使用的设计元素,进而帮助确保您企业的混合云所交付的性能,满足您企业所需要的灵活性和可扩展性。

横向扩展(Scale-Out)NAS的角色作用

横向扩展的NAS(网络附加存储)是混合云存储解决方案的基础。由于混合云架构对于市场而言还仍然相对较新——甚至对于全面部署更新——故而许多企业组织机构都不了解在横向扩展NAS中的一致性的重要性。许多环境是最终一致的,这意味着您企业所编写的到一个节点的文件是不能立即从其他节点访问的。这种情况可能是由于缺乏合适的实施协议,或与虚拟文件系统的集成整合不够充分所造成的。与之相反的情况则是严格一致的:文件能够在同一时间从所有节点访问。兼容的协议部署实现和与虚拟文件系统的紧密集成整合是一个很好的成功秘诀。

基于横向扩展NAS的混合云架构应该基于三层。在集群中的每台服务器都会运行一个基于这些层的软件堆栈。第一层是持久存储层。其是基于一个对象存储,提供了包括诸如极端的可扩展性的优势。但该层在其自身必须严格一致。虚拟文件系统是任何横向扩展NAS的核心。其在这个第二层,具有诸如高速缓存、锁、分层、配额和快照处理等功能。第三层含有诸如SMB和NFS等协议,以及虚拟机管理程序的集成点。

保持架构的对称和清洁是非常重要的。如果您的企业能够设法做到这一点,未来的许多架构挑战都将更容易克服。

现在,我们需要更仔细地关注一下存储层。因为其是基于一个对象存储,现在我们可以很容易地扩展我们的存储解决方案。借助干净的和对称的架构,我们可以扩展到兆字节的数据和万亿的文件。

存储层需要一个快速和有效的自我修复机制来履行其确保冗余的责任。为了让数据在数据中心保持尽可能低的足迹占用空间,存储层需要支持不同的文件编码。有些用于优化性能的,而有些则是为减少足迹占用空间。

元数据找到其合适的存储位置

元数据是虚拟文件系统的一个重要方面。元数据是描述文件系统结构的信息块。例如,一个元数据文件可以包括文件系统中的一个单一的文件夹包含了哪个文件和文件夹的信息。这意味着对于虚拟文件系统中的每个文件夹都将会有一个元数据文件。随着虚拟文件系统的发展,我们将获得越来越多的元数据文件。

对于一家仅仅只有较小的存储需求的企业组织机构而言,元数据的集中存储将是一项备选方案——但并不是当我们谈论横向扩展的时候。所以,让我们分析一下不要将元数据存储在哪些地方。在单个服务器中存储元数据会导致可扩展性差、性能差和可用性差。由于我们的存储层是基于一个对象存储,故而用来存储所有的元数据的一个更好的地方便是在对象存储——特别是当我们谈论数量繁多的元数据的时候。这种方法将确保良好的可扩展性,良好的性能和良好的可用性。

缓存以实现更好的性能

为了提高性能,软件定义的存储解决方案需要缓存设备。从一个存储解决方案的角度来看,无论是速度、规模以及价格;找到一个合适点是很重要的。对于一款SDS解决方案,通过在将其是降级到存储层之前,将其复制到另一个节点,以便在一个较高的水平保护数据也是重要的。

鉴于存储解决方案在容量能力和功能特性两方面的发展,特别是在虚拟或云环境中,支持多个域变得更加重要。支持多个文件系统也是相当重要的。不同的应用程序和使用案例倾向于不同的协议。有时,能够跨不同的协议访问相同的数据也是有必要的。

当然,虚拟机管理程序对于混合云的云元素的支持是必要的。因此,横向扩展的NAS还必须能够像超融合(hyperconverged)一样运行。软件定义的意义即在于此。

如果说架构是扁平化的,缺乏外部存储系统,横向扩展的NAS必须能够像一台虚拟机一样运行,并 利用虚拟机管理程序主机的物理资源。guest虚拟机(VM)的图像和数据将被存储在横向扩展的NAS提供的虚拟文件系统。guest虚拟机可以使用此文件系统在虚拟机之间共享文件,同时使VDI环境更完美。

那么,为什么支持许多协议是重要的呢?在一个虚拟环境中,许多不同的应用程序正在运行,每款应用程序都有其各自不同的协议需求。而通过支持多种协议,我们保持了体系结构的扁平化,使得我们在一定程度上有能力在不同协议的应用程序之间共享数据。

支持裸机和虚拟环境,有一个架构,让我们能够从小事做起,并逐步实现规模化扩展,成为软件定义的,同时支持快速和高效节能的硬件,并具有对于所有主要协议的支持,将有助于打造一个非常灵活和有用的存储解决方案。

在混合云中的文件

通常的情况是这样的:不同的办公室同时需要私有领域和能够与其他分支机构共享的领域。每个站点都有其自己独立的文件系统,所以只有部分的文件系统将能够与其他人共享。

选择一个文件系统的一部分,让其他部分能够在其他文件系统提供的灵活性的任何点上安装,以实现文件系统在办公室范围之外的扩展。确保发生在文件系统水平的同步能够跨多个站点拥有一个一致的文件系统视图。能够在不同的站点具体说明不同的文件编码是相当有用的,例如,如果是将一个站点作为备份目标的话。

规模化扩展的性能

通过汇集了上面所列出的所有功能,所创建的一款混合的云系统能够提供线性缩放,满足今天数据中心的需要。只有一个文件系统跨越所有服务器,能够改善可能影响性能的瓶颈。通过添加节点、本地协议支持和高性能的Flash支持所带来的横向规模扩展的灵活性都包含在这款基于横向扩展的NAS的架构的基础上。采用了这款系统的数据中心,将拥有他们可以负担得起的可扩展性。

关于作者

本文作者Stefan Bernbo是Compuverde公司的创始人兼首席执行官。20年来,Stefan设计并打造了大量的企业级的数据存储解决方案,旨在实现海量数据集存储的成本效益。从2004年到2010年,他曾供职于Storegate公司,该公司主要为消费者和企业市场提供满足他们最高的可用性和可扩展性要求,具有广泛影响的基于互联网的存储解决方案。此前,Stefan曾就几个项目与全球领先的电信设备和移动和固定网络服务运营商、瑞典巨头爱立信在系统和软件架构方面进行过合作。
本文转自d1net(转载)

相关实践学习
基于ECS和NAS搭建个人网盘
本场景主要介绍如何基于ECS和NAS快速搭建个人网盘。
阿里云文件存储 NAS 使用教程
阿里云文件存储(Network Attached Storage,简称NAS)是面向阿里云ECS实例、HPC和Docker的文件存储服务,提供标准的文件访问协议,用户无需对现有应用做任何修改,即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布式文件系统。 产品详情:https://www.aliyun.com/product/nas
相关文章
|
7月前
|
存储 安全 文件存储
什么是NAS?探索无限存储的可能性
【4月更文挑战第21天】
223 0
什么是NAS?探索无限存储的可能性
|
存储 人工智能 Serverless
将Stable Diffusion模型文件转存到FC环境的NAS
本文将会指导你开通基于NAS的Stable Diffusion 函数计算FC环境,并且可以将SD模型库的模型转存下载到FC应用下的NAS存储空间
3456 2
将Stable Diffusion模型文件转存到FC环境的NAS
|
4月前
|
消息中间件 存储 Serverless
函数计算产品使用问题之怎么访问网络附加存储(NAS)存储模型文件
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。
|
2月前
|
存储 网络协议 数据挖掘
|
4月前
|
存储 机器学习/深度学习 分布式计算
HDFS与网络附加存储(NAS)的比较
【8月更文挑战第31天】
123 0
|
7月前
|
存储 文件存储
无公网IP情况下如何远程查看本地群晖NAS存储的文件资源-2
无公网IP情况下如何远程查看本地群晖NAS存储的文件资源
115 1
|
7月前
|
存储 网络安全 文件存储
无公网IP情况下如何远程查看本地群晖NAS存储的文件资源-1
无公网IP情况下如何远程查看本地群晖NAS存储的文件资源
104 0
|
7月前
|
存储 运维 Serverless
Serverless 应用引擎产品使用之在函数计算中绑定非本地域的 NAS 存储如何解决
阿里云Serverless 应用引擎(SAE)提供了完整的微服务应用生命周期管理能力,包括应用部署、服务治理、开发运维、资源管理等功能,并通过扩展功能支持多环境管理、API Gateway、事件驱动等高级应用场景,帮助企业快速构建、部署、运维和扩展微服务架构,实现Serverless化的应用部署与运维模式。以下是对SAE产品使用合集的概述,包括应用管理、服务治理、开发运维、资源管理等方面。
|
7月前
|
存储 网络协议 数据管理