带你读《存储漫谈:Ceph原理与实践》——3.2.6 未来展望

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: 带你读《存储漫谈:Ceph原理与实践》——3.2.6 未来展望

3.2.6  未来展望


1. RGW 优势

Ceph 的 RGW 在不断引入新功能的情况下,经历几次大规模的重构,整个架构设计分层清晰、责任明确,保证了整个 RGW 的可演进。RGW 当前的架构也充分考虑了非功能性的需求。

RGW 通过引入 beast HTTP 服务器前端以及使用 librados 异步 API,逐渐向读写路径异步化的方向演进。

在可观测性方面,RGW 也是在多个层面提供了支持。对于集中状态收集方面,得益于和 Ceph MGR 组件的集成,RGW 支持上报状态信息到 MGR 中,为之后进一步导出观测指标到 MGR 提供了支撑。

在运行时状态统计方面,RGW 提供了 admin socket 支持,支持单个 RGW 实例导出运行时的各类统计结果。

对于在线的请求跟踪分析方面,RGW 也集成了基于 Jaeger 的分布式请求跟踪。

在可管理性方面,RGW 支持命令行管理工具 radosgw-admin 和 HTTP 协议的管理API。Ceph 社区也在呼吁 radosgw-admin 集成到 Ceph 管理命令中,进一步简化用户使用方式。

在功能扩展性方面,RGW 支持 Lua scripting,可进行自定义的处理。这很容易让人联想到 Nginx 社区和 OpenResty 社区,期待 RGW 的功能扩展性能催生出对象存储的OpenResty。


2. RGW 劣势

RGW 扩展性得益于 HTTP 协议的无状态,因此基于 RGW 的对象存储的扩展性约束主要来自于 RADOS 层。目前 RGW 还没有解决好单个存储类别下的容量扩展性问题,具体来说就是一个存储桶中的对象只能保存在单个 RADOS 集群中,单个 RADOS 集群容量是单个桶支撑容量的上限。大部分用户选择通过业务改造,使用多个存储桶来规避单个RADOS 集群的容量上限。

除了容量扩展性之外,社区版本存在元数据扩展性问题,也就是单桶能容纳的对象个数受限于单个 RADOS 集群的限制。

单桶元数据管理还存在可用性缺陷。在保存元数据的 RAODS 集群中,存在 OSD 异常下线后,恢复业务压力对读写请求造成严重影响,继而造成恢复期间请求错误率飙升、请求时延剧烈抖动的问题。问题的根本原因在于索引信息以 RADOS OMAP 接口的形式保存,而对象的 OMAP 不支持异步恢复。大部分用户选择创建无索引类型的存储桶来规避存储桶索引的问题。

Ceph RGW 的多数据中心冗余方案历经多年的发展,虽然已经演进到 V2 版本,但效果距离商用仍有距离,主要是因为 RPO/RTO 存在达标缺陷和成本缺陷。对于成本缺陷来说,RGW 多数据中心的痛点主要在于采用了两中心全量镜像的方式,在 PB 规模下的成本基本是不可接受的。对于 RPO/RTO 达标缺陷来说,RGW 多数据中心采用异步复制的方式,无法为多站点业务提供 RPO 为零的保证。正是这两点缺陷,限制了 RGW 在 PB 规模并且高 SLA 要求的对象存储场景上的落地。


3. 小结

虽然,我们在使用过程中发现了 RGW 有诸多待改进之处,但这依然不影响 RGW 是目前特性最丰富的优秀对象存储开源实现。相信上述提及的问题被更多的使用者发现,并且得到社区的重视之后,一定会得到解决。

与此同时,RGW 的诸多与时俱进的新兴特性不仅是对 RGW 架构演进能力的例证,同时也彰显了整个 RGW 社区的活力和创新性,因此我们有理由相信 RGW 一定会越来越好。

相关实践学习
借助OSS搭建在线教育视频课程分享网站
本教程介绍如何基于云服务器ECS和对象存储OSS,搭建一个在线教育视频课程分享网站。
相关文章
|
20天前
|
存储 安全 开发工具
oss加密存储
阿里云OSS为数据安全提供多种加密机制,包括服务器端的SSE-S3(AES-256透明加密)、SSE-C(用户管理密钥)和CSE-KMS(结合KMS进行密钥管理)。此外,OSS支持客户端加密SDK和HTTPS传输加密,确保数据在传输和存储时的安全。通过ACL、Bucket策略和访问密钥身份验证,实现权限控制与身份验证,全方位保障用户数据的安全性和隐私。用户可按需选择适合的加密方式。
53 2
|
7月前
|
存储 监控 文件存储
存储之外,还有什么?云计算对象存储服务OSS深度洞察
存储之外,还有什么?云计算对象存储服务OSS深度洞察
317 0
|
8月前
|
存储 分布式计算 大数据
大数据计算中,使用OSS作为外部存储
大数据计算中,使用OSS作为外部存储
56 1
|
8月前
|
存储 安全 API
阿里云oss存储简介和如何使用
阿里云OSS存储服务是一种安全、稳定、高效的云存储服务,适用于各种规模的应用和业务场景。它具备出色的持久性和可用性,可以为用户提供高可靠、低成本的存储解决方案。阿里云OSS存储具有广泛的应用场景
2110 0
|
10月前
|
存储 SQL 分布式计算
阿里云全托管flink-vvp平台hudi connector实践(基于emr集群oss-hdfs存储)
阿里云全托管flink-vvp平台hudi sink connector实践,本文数据湖hudi基于阿里云E-MapReduce产品,以云对象存储oss-hdfs作为存储
|
11月前
|
存储 数据管理 数据处理
阿里云对象存储OSS价格_云存储服务_企业数据管理_存储
阿里云对象存储OSS价格_云存储服务_企业数据管理_存储,阿里云对象存储OSS收费有两种计费模式,即包年包月和按量付费,包年包月是指购买存储包、流量包来抵扣OSS产生的存储费核流量费,OSS标准(LRS)存储包100GB优惠价33元、500GB存储包半年162元、OSS存储包40GB一年9元,OSS流量包100G 49元/月
516 0
|
20天前
|
存储 Java 对象存储
springboot配置阿里云OSS存储实现文件上传下载功能
【1月更文挑战第1天】springboot配置阿里云OSS存储实现文件上传下载功能
823 2
|
20天前
|
存储 SQL 关系型数据库
存储系统、数据库和对象存储 | 青训营
存储系统、数据库和对象存储 | 青训营
|
20天前
|
存储 安全 API
对象存储OSS产品常见问题之附件上传后存储存在被窃取的风险如何解决
对象存储OSS是基于互联网的数据存储服务模式,让用户可以安全、可靠地存储大量非结构化数据,如图片、音频、视频、文档等任意类型文件,并通过简单的基于HTTP/HTTPS协议的RESTful API接口进行访问和管理。本帖梳理了用户在实际使用中可能遇到的各种常见问题,涵盖了基础操作、性能优化、安全设置、费用管理、数据备份与恢复、跨区域同步、API接口调用等多个方面。
|
20天前
|
存储 安全 数据安全/隐私保护
oss数据加密与存储
阿里云OSS提供多种数据加密(SSE-S3, SSE-KMS, SSE-C, CSE-KMS)与存储安全措施,包括服务器和客户端加密、数据在磁盘上加密存储、多重冗余备份、访问控制列表和HTTPS安全传输。KMS支持密钥管理,确保数据静态和传输时的安全。严格的访问策略和身份验证保护资源免受未授权访问,满足高安全性和合规性需求。
61 3