高效的NoSQL数据库服务Amozon DynamoDB体验分享

本文涉及的产品
云原生数据库 PolarDB MySQL 版,通用型 2核8GB 50GB
云原生数据库 PolarDB PostgreSQL 版,标准版 2核4GB 50GB
简介: 高效的NoSQL数据库服务Amozon DynamoDB体验分享

一、前言


亚马逊的活动力度一向都比较大,因此让我有机会体验了Amozon DynamoDB这款完全托管的分布式NoSQL 数据库服务。另外,亚马逊云科技提供了100余种产品免费套餐。其中,计算资源Amazon EC2首年12个月免费,750小时/月;存储资源 Amazon S3 首年12个月免费,5GB标准存储容量;数据库资源 Amazon RDS 首年12个月免费,750小时;Amazon Dynamo DB 25GB存储容量 永久免费。活动地址


Amozon DynamoDB是什么?


Amazon DynamoDB 是一种全托管 NoSQL 数据库服务,相当于在NoSQL的基础上做了很多扩展,附加了很多降本增效的功能,让开发人员不需要额外去维护什么,开箱即用。它主要提供的服务有:无缝扩展,快速可预测的性能,减少繁琐的管理分布式数据库的工作负担,提供静态加密、按需备份、自动维护过期项目等。极大的减少开发人员的时间成本和提高建设效率。


可能有些小伙伴不清晰NoSQL与传统的关系型数据库的区别,这里简单的做一个介绍:


数据库 数据集 结构 优势
关系型数据库 表格/行列存储 关系型数据库的结构是预先定义好的,表与表之间可以建立关系、约束等。 能够保证数据的安全性和完整性
NoSQL 键值对(字典)结构 在非关系型数据库中,数据可以在任何时候任何地方添加。不需要预先定义。 扩展性高、体积更小、速度更快。


因此,如果业务关系不复制、依赖简单又需要经常修改字段,对性能要求很高但安全性要求不高的情况下,使用DynamoDB是非常不错的选择。反之还是建议使用诸如mysql这类的传统关系型数据库。


二、Amozon DynamoDB上手教程


1)帐号注册


没有AWS帐号的小伙伴需要先进行帐号注册:注册及上手试用地址 (在账单登记页可以使用国内的信用卡)


2)创建和查询NoSQL表


2.1 建表

建立帐号后,按照官方的DynamoDB使用教程即可快速的创建NoSQL表:


c4f41427b34340f08610b72dc6f0f0e0.png


2.2 添加数据


这里与官方文档稍有出入,实际操作可以通过点击列表的表名称-浏览项目-创建项目进行创建,如下图所示:

a3b45d32536047b3a73d281cc2f7f34b.gif


2.3 查询数据


然后点击运行按钮(也可以设置筛选条件)就可以将我们刚添加的数据查询出来:


29554bc02b9c42d3a2f115d336a358ea.png


2.4 删除/修改数据


选中列表中任意数据,就可以在右上角的“操作”按钮中选择对应的操作对数据进行修改或删除:

4a608056ae204c959eba246d0d720ad5.png


需要删除表的话,在外层的表列表中选择对应的表数据,点击删除按钮即可:

49d4feecab68460bbe7d244718aab071.png

3)使用Python管理DynamoDB


我们还可以使用Python来管理DynamoDB,官方文档有详细的教程,这里不再赘述。


4)踩坑记录


《使用 Amazon DynamoDB 和 Amazon SNS 构建回合制游戏》 教程中,按照走到应用部署这一步时,执行:bash scripts/create-lambda.sh命令出现了下图中的报错:

648b68aca8b749938ba159652661844a.png

按照提示将执行create-lambda.sh文件执行命令改为nodejs14.x后,再将之前新建的资源删除后即运行成功:

707a7c5e75ef41fc9b20431df8521d69.png

后面也是一路绿灯,完成了回合制游戏的构建。


三、Amozon DynamoDB特点说明

1)DynamoDB分区键、排序键的理解

1.1 分区键

在我们建表时,会让我们指定分区建:

03cc8626e9dd4291a92165882d246c6d.png


那分区键的作用是什么呢?这里给大家举一个例子说明:


比如现在有这样一个身份证号:210122199206140257,从这个身份证号就能快速的知道这是一位来自辽宁省、沈阳市.、辽中县的一名29岁男生。

身份证格式规则说明:前1-6位为行政区划代码即归属地,第7-14位为出生年月日,第15-17位为顺序代码,在同一个地区出生同一个出生的人通过顺序号码区分,第17位奇数表示男性,偶数表示女性,第18位为校验码,用于校验身份证号码是否合法。

而DynamoDB的分区键也有同样的作用,通过指定标识来对数据分区,这样查询数据会显著提高。


1.2 排序键


排序键可以让将我们的数据按指定的排序存储,在后续获取数据的时候就能够通过二分查找的方式来降低查询的时间复杂度。


2)DynamoDB的二级索引


在诸如Mysql之类的关系型数据库中,通过建立索引能够让我们在查想要数据时,不对全表进行扫描而是通过索引查询指定行范围的数据,这样有更快的速度。创建索引后,我们再修改表的数据,数据库会自动更改索引来映射表的修改,无需我们手动操作。


在dynamodb中如何实现类似的操作呢?


我们可以创建二级索引来实现类似的目的,DynamoDB的索引和oracle,mysql这些关系式数据库的索引有很大不同。DynamoDB的二级索引是由一个hash键和多个range键所组成的,它对支持应用程序需要的查询模式至关重要,关于DynamoDB索引的使用和介绍可以访问管理索引文档进行学习。


3)DynamoDB的备份和还原


数据备份和回滚恢复是至关重要的,DynamoDB具有完全自动化的按需备份、还原和时间点恢复的能力:

259925d180af41a4a658e1e5ecc6b664.png

另外,在备份的同时,也会对数据自动加密,编入目录,来提高管理的效率,我们可以在表详情页中的备份选项卡进行备份设置的操作:


46b9e67a647a4756b646ecdcb549e9b8.png


也可以按需创建一次性备份:

afba69972a464cf597b6e5a164028ee5.png


大家也可以访问 云原生数据库在线大会 了解数据库发展历史,及未来发展方向等。


四、总结


DynamoDB除了提供数据存取管理的功能外,在高可用性(扩展、备份等)方面也做了不少努力,同时也有非常多的开箱即用的服务。因此,它不仅能在大规模数据的情况下保证高性能的数据存取,也能减少开发人员的建设运维成本。

在游戏应用中,消息、通知的收发是必不可少的,另外游戏应用对性能的要求也相对于传统前后端分离应用来讲会高不少,通过Amazon DynamoDB 和 Amazon SNS的组合,能够轻松解决这两个问题:


0ca503ff11f74b35b40e2491ebf15414.png


当然DynamoDB也有不适用的场景:在产品开发的初期,如果没有一个完善清晰的设计方案,特别是走一步看一步的敏捷开发模式下,并不建议使用DynamoDB,因为按照DynamoDB的文档的理解:只有你对产品本身很熟悉时,才能设计好它的分区、排序键之类的。换而言之,当产品处于较成熟,或自己对产品很熟悉时,使用DynamoDB绝对能达到事半功倍的效果。


亚马逊云科技专为开发者们打造了多种学习平台:


入门资源中心:从0到1 轻松上手云服务,内容涵盖:成本管理,上手训练,开发资源:点我访问

架构中心:亚马逊云科技架构中心提供了云平台参考架构图表、经过审查的架构解决方案、Well-Architected 最佳实践、模式、图标等:点我访问

构建者库:了解亚马逊云科技如何构建和运营软件:点我访问

用于在亚马逊云科技平台上开发和管理应用程序的工具包::点我访问


相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍如何基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
目录
相关文章
|
4月前
|
存储 关系型数据库 数据库
附部署代码|云数据库RDS 全托管 Supabase服务:小白轻松搞定开发AI应用
本文通过一个 Agentic RAG 应用的完整构建流程,展示了如何借助 RDS Supabase 快速搭建具备知识处理与智能决策能力的 AI 应用,展示从数据准备到应用部署的全流程,相较于传统开发模式效率大幅提升。
附部署代码|云数据库RDS 全托管 Supabase服务:小白轻松搞定开发AI应用
|
11天前
|
人工智能 运维 NoSQL
云栖大会|AI浪潮下的NoSQL演进:下一代数据库的破局之道
AI浪潮下的NoSQL演进:下一代数据库的破局之道
|
5月前
|
存储 NoSQL 搜索推荐
NoSQL数据库分类概览
以上就是我们的NoSQL数据库奇幻之旅。每一种NoSQL数据库都有自己独特的魅力和专长,择选合适的数据库,就像在魔法世界中挑选最适合自己的魔杖,使你的数据管理变得更加高效和神奇。在当今数据驱动的时代,懂得这些数据库的秘密,就掌握了处理各种数据挑战的关键。
249 61
|
10月前
|
存储 NoSQL 关系型数据库
【赵渝强老师】什么是NoSQL数据库?
随着大数据技术的兴起,NoSQL数据库(Not Only SQL)得到广泛应用。它不局限于二维表结构,允许数据冗余。常见的NoSQL数据库包括Redis、MongoDB和HBase。Redis是基于内存的高性能数据库,采用单线程模型和多路复用I/O,支持高效的数据结构。MongoDB使用BSON格式存储文档,查询语言强大,类似关系型数据库。HBase基于HDFS,适合数据分析,采用列式存储,支持灵活的列族设计。视频讲解及更多内容见下文。
474 79
|
9月前
|
人工智能 Cloud Native 多模数据库
实力见证!数据管理服务DMS、云原生多模数据库Lindorm荣获“2024技术卓越奖”
实力见证!数据管理服务DMS、云原生多模数据库Lindorm荣获“2024技术卓越奖”
203 1
|
9月前
|
数据管理 关系型数据库 MySQL
数据管理服务DMS支持MySQL数据库的无锁结构变更
本文介绍了使用Sysbench准备2000万数据并进行全表字段更新的操作。通过DMS的无锁变更功能,可在不锁定表的情况下完成结构修改,避免了传统方法中可能产生的锁等待问题。具体步骤包括:准备数据、提交审批、执行变更及检查表结构,确保变更过程高效且不影响业务运行。
465 2
|
12月前
|
存储 缓存 NoSQL
常见的 NoSQL 数据库有哪些?
常见的 NoSQL 数据库有哪些?
742 59
|
10月前
|
关系型数据库 OLAP API
非“典型”向量数据库AnalyticDB PostgreSQL及RAG服务实践
本文介绍了非“典型”向量数据库AnalyticDB PostgreSQL及其RAG(检索增强生成)服务的实践应用。 AnalyticDB PostgreSQL不仅具备强大的数据分析能力,还支持向量查询、全文检索和结构化查询的融合,帮助企业高效构建和管理知识库。
499 19
|
10月前
|
JavaScript NoSQL Java
基于SpringBoot+Vue实现的大学生就业服务平台设计与实现(系统源码+文档+数据库+部署等)
面向大学生毕业选题、开题、任务书、程序设计开发、论文辅导提供一站式服务。主要服务:程序设计开发、代码修改、成品部署、支持定制、论文辅导,助力毕设!

热门文章

最新文章

下一篇
开通oss服务