带你读《存储漫谈:Ceph原理与实践》——3.2.6 未来展望

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: 带你读《存储漫谈:Ceph原理与实践》——3.2.6 未来展望

3.2.6  未来展望


1. RGW 优势

Ceph 的 RGW 在不断引入新功能的情况下,经历几次大规模的重构,整个架构设计分层清晰、责任明确,保证了整个 RGW 的可演进。RGW 当前的架构也充分考虑了非功能性的需求。

RGW 通过引入 beast HTTP 服务器前端以及使用 librados 异步 API,逐渐向读写路径异步化的方向演进。

在可观测性方面,RGW 也是在多个层面提供了支持。对于集中状态收集方面,得益于和 Ceph MGR 组件的集成,RGW 支持上报状态信息到 MGR 中,为之后进一步导出观测指标到 MGR 提供了支撑。

在运行时状态统计方面,RGW 提供了 admin socket 支持,支持单个 RGW 实例导出运行时的各类统计结果。

对于在线的请求跟踪分析方面,RGW 也集成了基于 Jaeger 的分布式请求跟踪。

在可管理性方面,RGW 支持命令行管理工具 radosgw-admin 和 HTTP 协议的管理API。Ceph 社区也在呼吁 radosgw-admin 集成到 Ceph 管理命令中,进一步简化用户使用方式。

在功能扩展性方面,RGW 支持 Lua scripting,可进行自定义的处理。这很容易让人联想到 Nginx 社区和 OpenResty 社区,期待 RGW 的功能扩展性能催生出对象存储的OpenResty。


2. RGW 劣势

RGW 扩展性得益于 HTTP 协议的无状态,因此基于 RGW 的对象存储的扩展性约束主要来自于 RADOS 层。目前 RGW 还没有解决好单个存储类别下的容量扩展性问题,具体来说就是一个存储桶中的对象只能保存在单个 RADOS 集群中,单个 RADOS 集群容量是单个桶支撑容量的上限。大部分用户选择通过业务改造,使用多个存储桶来规避单个RADOS 集群的容量上限。

除了容量扩展性之外,社区版本存在元数据扩展性问题,也就是单桶能容纳的对象个数受限于单个 RADOS 集群的限制。

单桶元数据管理还存在可用性缺陷。在保存元数据的 RAODS 集群中,存在 OSD 异常下线后,恢复业务压力对读写请求造成严重影响,继而造成恢复期间请求错误率飙升、请求时延剧烈抖动的问题。问题的根本原因在于索引信息以 RADOS OMAP 接口的形式保存,而对象的 OMAP 不支持异步恢复。大部分用户选择创建无索引类型的存储桶来规避存储桶索引的问题。

Ceph RGW 的多数据中心冗余方案历经多年的发展,虽然已经演进到 V2 版本,但效果距离商用仍有距离,主要是因为 RPO/RTO 存在达标缺陷和成本缺陷。对于成本缺陷来说,RGW 多数据中心的痛点主要在于采用了两中心全量镜像的方式,在 PB 规模下的成本基本是不可接受的。对于 RPO/RTO 达标缺陷来说,RGW 多数据中心采用异步复制的方式,无法为多站点业务提供 RPO 为零的保证。正是这两点缺陷,限制了 RGW 在 PB 规模并且高 SLA 要求的对象存储场景上的落地。


3. 小结

虽然,我们在使用过程中发现了 RGW 有诸多待改进之处,但这依然不影响 RGW 是目前特性最丰富的优秀对象存储开源实现。相信上述提及的问题被更多的使用者发现,并且得到社区的重视之后,一定会得到解决。

与此同时,RGW 的诸多与时俱进的新兴特性不仅是对 RGW 架构演进能力的例证,同时也彰显了整个 RGW 社区的活力和创新性,因此我们有理由相信 RGW 一定会越来越好。

相关实践学习
借助OSS搭建在线教育视频课程分享网站
本教程介绍如何基于云服务器ECS和对象存储OSS,搭建一个在线教育视频课程分享网站。
相关文章
|
2月前
|
存储 关系型数据库 MySQL
MySQL——数据库备份上传到阿里云OSS存储
MySQL——数据库备份上传到阿里云OSS存储
96 0
|
5月前
|
存储 安全 开发工具
oss加密存储
阿里云OSS为数据安全提供多种加密机制,包括服务器端的SSE-S3(AES-256透明加密)、SSE-C(用户管理密钥)和CSE-KMS(结合KMS进行密钥管理)。此外,OSS支持客户端加密SDK和HTTPS传输加密,确保数据在传输和存储时的安全。通过ACL、Bucket策略和访问密钥身份验证,实现权限控制与身份验证,全方位保障用户数据的安全性和隐私。用户可按需选择适合的加密方式。
224 2
|
11月前
|
存储 监控 文件存储
存储之外,还有什么?云计算对象存储服务OSS深度洞察
存储之外,还有什么?云计算对象存储服务OSS深度洞察
500 0
|
5月前
|
存储 Java 对象存储
springboot配置阿里云OSS存储实现文件上传下载功能
【1月更文挑战第1天】springboot配置阿里云OSS存储实现文件上传下载功能
1873 2
|
1月前
|
存储 API Swift
Ceph Reef(18.2.X)之Swift操作对象存储网关
这篇文章详细介绍了Ceph Reef(18.2.X)中通过Swift API操作对象存储网关的方法,包括创建用户、子用户、配置环境变量、以及使用swift命令行工具进行存储桶和对象的管理。
27 7
Ceph Reef(18.2.X)之Swift操作对象存储网关
|
1月前
|
存储 对象存储
Ceph Reef(18.2.X)的对象存储网关(rgw)组件搭建
这篇文章是关于Ceph Reef(18.2.X)版本中对象存储系统的配置和使用案例,包括对象存储网关的概述、核心资源介绍、Ceph RGW支持的接口、高可用radosgw的部署、s3cmd工具的使用以及如何通过HTTP方式访问对象存储。
43 3
Ceph Reef(18.2.X)的对象存储网关(rgw)组件搭建
|
1月前
|
存储 监控 数据可视化
SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
【9月更文挑战第2天】SLS 虽然不是直接使用 OSS 作为底层存储,但它凭借自身独特的存储架构和功能,为用户提供了一种专业、高效的日志服务解决方案。
78 9
|
1月前
|
对象存储 Python
Ceph Reef(18.2.X)之python操作对象存储网关
这篇文章介绍了如何在Ceph Reef(18.2.X)环境中使用Python操作对象存储网关(rgw),包括环境搭建、账号创建、使用s3cmd工具以及编写和测试Python代码。
36 3
|
2月前
|
存储 JavaScript 前端开发
Vue中实现图片上传,上传后的图片回显,存储图片到服务器 【使用对象存储OSS】
这篇文章介绍了在Vue中实现图片上传到阿里云OSS对象存储服务的完整流程,包括服务端签名直传的前提知识、后端设置、前端组件封装以及图片上传和回显的效果展示。
|
2月前
|
存储 Java 关系型数据库
实时计算 Flink版产品使用问题之以jar包方式同步数据是否需要定义存储oss的位置
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。

热门文章

最新文章