云对象存储可以用作功能强大且非常便宜的数据库

您是否相信您可以使用完全托管、可大规模扩展、高度可用且价格低廉的无服务器数据库，每月只需 5 美元，您就可以存储数亿条记录并读写数十亿条记录？如果您的数据库需求可以通过非常简单的键值存储来满足，则可以。解决方案是使用廉价的云对象存储。

架构师的宝库，每天一篇，开拓你的视野和深度。分享企业架构，业务架构，应用架构，数据架构，技术架构，安全架构等。讨论架构框架,规划，治理,标准，落地。交流新兴的架构风格和模型。如微服务，事件驱动，微前端，大数据，数仓，物联网，人工智能架构。

亚马逊于 2006 年发布了他们的 S3（简单存储服务）对象存储产品。从那时起，所有其他主要的云服务提供商以及许多其他云提供商都提供了对象存储解决方案。

对象存储可用于存储照片、视频、备份等，但也可用于存储数据。数据可以以任何您想要的格式存储，例如 JSON、BSON、XML、CSV、协议缓冲区、MessagePack、纯文本或任何其他数据序列化格式。

对象存储在桶中。存储桶通常可以在全球特定区域的数据中心创建。这使您可以使您的数据更接近将要访问数据的用户。对于某些提供商，可以将存储桶配置为网站，从而允许您将对象存储用作廉价的网站主机。

价钱

对象存储相对于无服务器数据库的主要优势在于价格。存储成本通常为每 GB 1 美分至 2 美分，而最便宜选项的出站网络成本通常为每 GB 1 美分。

许多对象存储产品还对读取和写入 API 请求收费。如果你使用对象存储作为数据库解决方案，如果你每个月收到数亿或数十亿的请求，这可能会大大增加你的成本，所以最好避免对读写请求收费的产品。有很多解决方案不对请求收费。在下表中，Read 和 Write 列表示每百万请求中的美分。带有“-”的产品没有请求费用。

为了进行比较，以下是一些无服务器数据库的相同定价。（请参阅“移动或Web应用的无服务器数据库”。）budget object存储产品的价格只是无服务器数据库的一小部分。

下表显示了一些具有不同存储量和读写请求的对象存储服务和数据库的每月成本。记录大小假定为 500，但最后两列除外，它们的记录大小为 100 小和 4000 大。这表明，在您开始存储和读取和写入数亿条记录之前，定价实际上变化不大。然而，除此之外，您选择的产品可能会产生很大的不同。

访问数据

大多数对象存储产品都与亚马逊的 S3 REST API 兼容。两个主要的例外是 Google 和 Azure。S3 兼容性意味着您可以使用为 S3 构建的工具和 SDK。您还可以轻松切换供应商，避免供应商锁定，或者只需更改访问 URL 即可使用多个供应商。

简单的 S3 REST API 非常适合移动和 Web 应用程序使用，无需单独的 API 服务器即可直接访问数据。

对象以扁平结构存储在存储桶中，没有文件系统中的层次结构。但是，您可以使用路径分隔符来模拟这种情况，通常是“/”。例如，“photos/photo1.jpg”创建一个模拟的“photos”文件夹，其中包含“photo1.jpg”。

S3 API 允许您读取、写入和删除对象。对象通过其唯一键访问，可能类似于文件名。无法进行诸如“SELECT * FROM Employees WHERE City='San Diego'”之类的查询。这可能会极大地限制您将对象存储用作数据库的方式，但是在许多应用程序中，您所需要的只是通过 id 访问数据。

使用对象存储也无法进行记录更新。对记录的任何更改都是通过重写整个记录来完成的。

存储桶和对象具有访问权限来限制谁可以读取和写入。可以向存储桶和/或对象授予公共访问权限，以允许任何人读取或写入。

性能

对象存储性能通常非常好，即使与常规数据库相比也是如此。我验证了一些对象存储产品的响应时间，发现时间为 50 毫秒 - 300 毫秒。我在无服务器数据库中发现了类似的结果。尽管数据库通常可以在不到 10 毫秒的时间内访问数据，但当请求和响应通过 Internet 传输时，访问时间会大大增加。

速率限制

请注意，提供商通常对每秒可以发出的请求数有限制。限制可能足够高，您不会受到影响。并非所有提供商都指定其速率限制。谷歌是唯一声称他们会扩展以满足您的请求率的公司。

AWS 每个前缀（文件夹）每秒可以读取 5,500 个对象并写入 3,500 个对象。如果您需要更多请求，请将数据拆分到文件夹中。

备份

执行数据库备份通常是为了避免在服务器故障的情况下丢失数据或从用户或应用程序错误中恢复数据。

数据库持久性是衡量提供商可以保证您的数据不会丢失的程度，通常表示为包含许多 9 的百分比。例如，10 个九的持久性将是 99.999999%。在主要供应商中，AWS 和 Google 获得 11 个 9，Azure 获得 12 个。通过在位于不同地理区域的数据中心复制数据来增强耐用性。由于高持久性，可能不需要备份对象存储数据。

几乎每个对象存储提供程序都允许您对对象进行版本控制。这意味着每次用更新替换对象时，旧对象都会保留一个版本号，从而可以返回到以前的版本。这在用户或应用程序错误的情况下提供了自动备份。

产品详情

AWS S3

AWS S3 是比较所有其他对象存储产品的黄金标准。S3 的定价与其他供应商的同类产品类似。

• 优点：庞大的 AWS 系统的一部分；稳定安全；非常高的速率限制；世界各地的许多数据中心
  
• 缺点：请求费用
  

AWS Lightsail

Lightsail 是 AWS 的一个部门，拥有服务器和其他一些云产品，这些产品的定价可以与 DigitalOcean 等预算云提供商竞争。与常规 AWS 产品相比，Lightstail 产品通常也更容易设置和使用。

2021 年 7 月，Lightsail 宣布了一款基于 AWS S3 的廉价对象存储产品。这在某种程度上改变了游戏规则。您似乎以更低的价格获得了 S3 的所有好处。捆绑包每月 1、3 或 5 美元，存储空间为 5、100 或 250 GB，网络传输为 25、250 或 500 GB。超出这些限制的存储和网络按正常 S3 费率收费。但是，在捆绑限制之内或之外都没有请求费用。

5 美元的计划使 S3 的价格类似于 DigitalOcean、Linode 和 Vultr 提供的预算计划。但是，与其他预算提供商的计划不同，Lightsail 捆绑包似乎仅限于单个存储桶。如果您需要在世界各地设置多个存储桶，一个好的定价策略可能是设置多个 1 美元存储桶，然后根据需要增加到 3 美元或 5 美元存储桶。Lightsail 允许您在计费期间切换一次定价计划。

• 优点：与 S3 相同，但价格便宜得多；无申请费；低 1 美元的最低价格
  

Azure Blob 存储

Azure 对象存储称为 blob 存储。

• 优点：庞大的 Azure 系统的一部分；稳定安全；非常高的速率限制；世界各地的许多数据中心
  
• 缺点：请求费用；不兼容 S3
  

谷歌云存储

谷歌云存储是谷歌的对象存储产品。

• 优点：庞大的 Google Cloud 系统的一部分，稳定且安全，无限制的速率限制，遍布全球的许多数据中心，3 个区域的免费选项（5GB 存储，5,000 次写入/月，50,000 次读取/月，1GB 网络/月）
  
• 缺点：总是免费限制后的请求费用；任何提供商的最高网络费率；不兼容 s3
  

Firebase

Firebase 是一家 Google 公司，以合理的价格提供大量云产品，这些产品通常易于设置和使用。凭借大量的免费选项，许多公司可以免费使用 Firebase Cloud Storage。

• 优点：与 Google 相同，但有更好的免费选项（每天 20K 写入、每天 50K 读取、每天 1GB 网络）
  

甲骨文云

Oracle 云对象存储的定价比其他大型提供商更优惠。

• 优点：写请求的价值；前 10TB/月没有网络费用，之后非常便宜
  
• 缺点：请求费用；高存储价格
  

阿里巴巴

阿里巴巴的对象存储服务（OSS）是一个非常划算的选择。有一个即用即付计划或具有存储和网络限制的计划，可以节省一点成本。中国有21个数据中心，其中10个。

• 优点：世界各地的许多数据中心；除非您达到每月 5 亿次请求，否则没有请求费用的良好定价
  

DigitalOcean

DigitalOcean 是一家规模较小的云公司，提供易于快速部署且价格低于大型云提供商的服务器和数据库。他们的对象存储被称为 Spaces，是第一个提供 250GB 存储、1TB 出站传输和无请求费用且每月 5 美元的惊人低价。任何超出限制的存储或网络都以非常损失的价格收费。这种费用结构非常适合将对象存储用作非常便宜的数据库。

Spaces 的一个问题是速率限制。每个空间（存储桶）限制为大约 200 个请求/秒。如果这是一个问题，您可以通过使用多个空格来解决这个问题。您最多可以在同一帐户中创建 100 个空间。（我发现一些用户在访问 Spaces 的速度远低于 200/秒时遇到了问题。）

• 优点：难以置信的价值
  
• 缺点：速率限制可能会限制某些用户；只有 5 个数据中心
  

Linode

Linode 类似于 DigitalOcean，以易于部署的高价格提供云服务。他们的对象存储产品定价与 DigitalOcean 相同。

• 优点：难以置信的价值
  
• 缺点：只有 4 个数据中心
  

Vultr

Vultr 类似于 DigitalOcean 和 Linode。他们的对象存储产品的价格与其他两个相同。

• 优点：难以置信的价值
  
• 缺点：新泽西州只有 1 个数据中心
  

Exoscale

Exoscale 的对象存储在欧洲的 6 个数据中心中具有竞争力的价格。

• 优点：物有所值
  
• 缺点：数据中心仅在欧洲
  

Scaleway

Scaleway 的对象存储在欧洲拥有 3 个数据中心，价格极具竞争力。您每月可获得 75GB 的存储空间和免费网络。

• 优点：非常好的定价和免费套餐
  
• 缺点：数据中心仅在欧洲
  

Wasabi

Wasabi 只做一件事，那就是对象存储。他们提供任何其他提供商的最优惠价格。读取、写入或网络不收取任何费用。唯一的成本是 0.006 美元/GB 的存储成本，这非常便宜。

但是，定价常见问题解答揭示了一些可能使 Wasabi 不适合用作数据库的细节。对象的最短持续时间为 90 天。如果一个对象在 90 天之前被删除，它仍被计为整个 90 天的存储。如果在 90 天内多次更新对象会发生什么，似乎没有任何文档说明。

然后是这样的：“如果您每月的出口数据传输量大于您的活动存储量，那么您的存储用例就不适合 Wasabi 的免费出口政策。”并且：“如果您的用例经常超出我们免费 API 请求政策的指导方针，我们保留限制或暂停您的服务的权利。”

• 优点：总体最优价格
  
• 缺点：限制可能禁止使用芥末作为数据库
  

Backblaze B2

Backblaze 进行计算机备份和 B2 对象存储。B2 的存储价格最低，为 0.005GB/月，下载价格非常低，为 0.01GB/月。但是，它确实会为读取请求收取典型的每百万美元 0.40 美元。如果您每月不处理数亿或数十亿个请求，这可能是一个不错的选择。

• 优点：价格优惠
  
• 缺点：阅读请求费；只有 3 个数据中心；无法选择数据中心
  

Tebi

Tebi 是一个非常新的组织，只做对象存储。它们的主要功能是实时复制到其他服务器，以使数据更接近用户。不幸的是，他们目前只有 4 个数据中心。

• 优点：价格优惠；免费提供 25GB 存储空间和 250GB 网络
  
• 缺点：只有 4 个数据中心；很新，所以没有经过时间的考验
  

注释

如果您使用对象存储作为数据库解决方案，我很想听听您的意见。我目前只在一个使用 Cloud Storage for Firebase 的网络应用程序上完成了这项工作，而且效果非常好。我目前正在评估一种产品的对象存储选项，该产品需要相当多的存储空间，每月可能有数亿个请求。