看云栖说云栖 —— 双十一的俩功臣

本文涉及的产品
RDS AI 助手,专业版
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
简介: 功臣很多,今天就说俩

几天前在一篇《2684亿!阿里CTO张建锋:不是任何一朵云都撑得住双11》的文章中提到了阿里有几个方面做的特别好:

  • 自研神龙架构、说的是神龙服务器支撑下的阿里云计算基础架构平台。
  • 自研云原生数据库、一个是OceanBase、一个是POLARDB。
  • 计算与存储分离、说的是大规模分布计算场景下的独立可扩容存储池。
  • 大规模RDMA网络、存储之所以在远端访问可以比本地读写更快是因为RDMA网络,阿里是全球第一个大规模应用RDMA网络的公司。

两天前在北大光华管理学院和阿里研究院联合举办的2019「看中国」思想论坛上,阿里巴巴集团董事局主席兼首席执行官张勇表示,双11最看重的是和54.4万笔/秒的订单峰值以及背后的技术
54.4万笔/秒背后的技术可能有很多,最首当其冲的就是云原生数据库吧,这次就让我们聊聊云栖大会上和这两个云原生数据库有关的技术细节吧,文中内容主要取自2019杭州云栖大会以下论坛:

  • 分布式数据库专场
  • 数字银行专场
  • POLARDB云原生数据库专场

首先来看OceanBASE,OceanBase是由蚂蚁金服开发和使用的,据蚂蚁金服公众号文章介绍,在双十一期间,OceanBASE创造了6100万次/秒的数据库处理峰值的世界记录, OceanBase还在不久前的的TPC-C测试上一举挑落霸占榜首九年的Oracle,令Oracle从此不在独孤求败的同时也宣告在数据库这个基础技术领域里中国人终于赶上来了。
在分布式数据库专场有一个Session叫做《深入OceanBase 企业级数据库的分布式技术》,毫无疑问OceanBASE和Oracle 都是企业级数据库,但OceanBASE还是分布式的。从TPC-C的测试架构上看,Oracle用于完成测试的是专门设计的小型机,而OceanBASE用的就是普通的PC 服务器,正是因为有了分布式技术才能让便宜的PC服务器战胜昂贵的小型机。
在Ocean当前主要应用的2.2版本中,主要突出三个特性:

  • Oracle 兼容性、全面兼容Oracle的数据类型,支持Oracle PL/SQL 存储过程、在TPC-C测试中就使用了Oracle兼容的存储过程。支持执行计划管理功能、支持部分Oracle系统预定义Package、支持150+的兼容函数和表达式、30张数据字典、30张性能视图。
  • 事务处理、支持串行化隔离级别这一最可靠但代价最高的事务隔离机制,支持savepoint/rollback to快速恢复机制,支外键约束。
  • 性能提升、OLTP(联机事务处理)和OLAP(联机分析处理)性能大幅提升,这次的TPC-C测试用的就是这个2.2版本。

除了阿里巴巴经济体,OceanBASE目前的部署案例包括(排名不分先后):

  • 南京银行
  • 山西农信
  • 西安银行
  • 中国建设银行
  • 网商银行
  • 东莞银行
  • 天津银行
  • 苏州银行
  • 国泰产险
  • 常熟农商银行
  • 广东农信
  • 招商证券

从客户案例上就可以看出,OceanBASE主要的定位是金融支付这个对数据库最严苛的场景。在数字银行分会场,来自蚂蚁金服的专家作了《银行数字化转型和创新案例》的分享。
在演讲中提出了数字金融的六大预见:

  • 银行正在从一个“地方”变成一种随时、随地、随需、“永远在线”的服务。
  • “数据资产”将成为最重要资源和核心竞争力,从现有的“流程银行”转变为“数据银行”。
  • “数字化半径”=“业务迭代半径”,银行更加注重“数字化生态连接”的建设,以获得更多的业务场景和流量。
  • 数字化成熟度高的银行将率先完成“乐高式银行”,整合内外部业务资源,形成“App Store”的运营模式。
  • 银行将从单纯的“金融服务商”转变为“综合类生活服务商”,超过60%以上的金融服务将隐藏在各个生活场景中,金融服务讲随手可得。
  • 2022年内将有超过50%的银行会完成新一代分布式金融核心架构改造,迎接全面的数字金融时代。

其中OceanBASE就是阿里巴巴用于新一代分布式金融核心架构改造的利器之一。
在阿里云互联网银行的解决方案的架构图上,OceanBASE位于IaaS基础架构服务平台的核心位置。
1.jpg

(图片来自于阿里云官网)
在这届云栖大会上,来自蚂蚁金服的阿里金融云正式并入阿里云,成为阿里云内部继新零售、数字政府之后的另一个一级部门。OceanBASE也正式上架阿里云,目前正处于邀测阶段。
2.jpg

(以上内容来自阿里云官网)
OceanBASE在过去通常只部署在金融机构的线下专有云,今天来到了线上公共云,另一个阿里云云原生数据库产品POLARDB则是从线上公共云来到了线下私有云。在本次云栖大会上,阿里云宣布正式推出高性能数据库一体机—— POLARDB BOX
POLARDB是阿里云自研的云原生数据库,在本次双十一期间,POLARDB数据库处理峰值达到8700万次/秒。在前不久举行的第六届世界互联网大会上,POLARDB更是当选了世界互联网领先科技成果。
3.jpg

(图片来自云栖社区)
本届云栖大会设有专门的《POLARDB云原生数据库专场》,第一个Session是阿里云智能数据库事业部总经理鸣嵩的《POLARDB 云原生数据库演化》。
鸣嵩将数据库的演化分成三个阶段:

  • 采购License自建、购买Oracle、SQL Server、DB2等许可,安装部署在自己的服务器上。
  • 云上托管数据库、使用阿里云的RDS这样的托管数据库,使用的还是传统数据库,只不过改由云服务商来运维和管理。
  • 云原生数据库、在传统数据库并不适用于数字经济环境,因此阿里云根据组织机构数字化转型的需求开发出了云原生数据库POLARDB

阿里云为什么要开发云原生数据库?鸣嵩同时还管理着阿里云RDS团队,自然对托管数据库在互联网场景下的痛点了如指掌:

  • 活动上线,压力突增,数据库来不及升级
  • 业务发展很快,数据库即将超过3T,来不及拆库
  • 应用扩容了,上百台ECS连接同一台数据库,高并发下性能差
  • 使用读写分离,刚更新的数据,查询不到
  • 老板要看活动运营数据,有一个复杂大SQL查询非常慢,半小时了还没跑完
  • 主从复制经常中断,1236 1042 错误
  • 添加一个字段,备库延迟3小时
  • 1T数据量,一次备份竟然需要十几个小时
  • 备份时会锁表,必须在业务低峰期操作

阿里云开发POLARDB就是要解决这些问题的,POLARDB单个集群存储容量最高可达100TB、单库最多可扩展到16个节点、集群最大支持1408核CPU10TB数据的实例迁移只需要15分钟1分钟即可完成10TB的数据备份。适用于企业多样化的数据库应用场景。以下是POLARDB的架构图:
4.jpg

(上图来自阿里云开发者社区)
POLARDB采用的是分布式共享存储架构,就是集群中的所有计算节点共享使用一组分布式的存储节点,计算和存储节点之间使用高速的RDMA网络通信。不像RDS的只读节点需要额外的存储空间和复制开销,POLARDB的共享存储架构无需为只读节点增加存储成本,因此在RDS的最大1主5从的架构下,使用POLARDB反而能够降低44%的成本,另外由于新增只读节点不需要数据复制,POLARDB最大能够支持15个只读节点,是RDS的3倍
在数据库引擎支持上,POLARDB提供MySQL5.6/8.0、PostgreSQL11、Oracle 兼容引擎。因为完全兼容MySQL,MySQL的分库方案依然可用,当数据库容量超过100TB时,POLARDB for MySQL还支持通过DRDS分布式数据库服务来进行横向水平扩展。
假如您曾遇到过上面提到过的托管数据库痛点,不妨尝试下POLARDB,目前POLARDB正处于推广促销期

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
目录
相关文章
|
5月前
|
人工智能 自然语言处理 安全
如何让 AI 工具更懂你,更听话?
你是否也曾被AI“气到吐血”?明明说的是A,AI却给了B?别沮丧,2025年的AI也需要“正确沟通”。本文教你五大提示技巧:动态提示、多模态输入、Few-shot示例、任务分解与安全边界,让AI从“人工智障”变身“贴心助手”。学会“说AI的语言”,释放创造力,提升效率,开启智能生活新时代!
1498 0
|
8月前
|
Ubuntu Linux Windows
IP地址查看方法
本指南介绍了在不同操作系统中查看设备IP地址的方法。在Windows系统中,可通过命令提示符(输入`ipconfig`)或设置界面查找IPv4地址;Linux系统中,使用终端命令`ifconfig`或`ip addr show`获取网络接口的IP;Mac系统则可在“系统偏好设置”中的“网络”查看,或通过终端执行相同命令获取。这些方法简单易行,适用于各种常见场景。
3711 11
|
监控 安全 测试技术
2024年度云治理企业成熟度发展报告解读(三)五大支柱关键数据解读
本文深入分析了安全、稳定、成本、性能、运行等云治理五大支柱的关键数据,指出身份安全关注度显著提升,成为企业云计算中的核心焦点。
325 11
2024年度云治理企业成熟度发展报告解读(三)五大支柱关键数据解读
|
存储 运维 安全
2024年度云治理企业成熟度发展报告解读(二)云市场背景调查数据
报告中指出,大多数企业在云计算实践中的管理与数据使用方面存在显著问题,特别是72.5%的客户仍依赖控制台开通资源,42.4%采用多账号管理但仅14.7%启用单点登录,以及多数企业使用root用户管理资源,导致安全风险。
2024年度云治理企业成熟度发展报告解读(二)云市场背景调查数据
|
人工智能 安全 搜索推荐
2024年度云治理企业成熟度发展报告解读(四)支柱结构关系及案例分享
从组织、成本、稳定、安全到性能、效率这样一个路径,我们一定要有策略地完成各个支柱之间的互相配合。云治理不仅仅是技术问题,而是需要多团队合作和管理策略的制定。
2024年度云治理企业成熟度发展报告解读(四)支柱结构关系及案例分享
|
安全 搜索推荐 JavaScript
全员学习低代码,一汽大众领跑数智化转型背后的秘密|《102个开发者故事》第七期
500位低代码开发者,90%来自一线,低代码开发在一汽-大众百花齐放。
1576 1
全员学习低代码,一汽大众领跑数智化转型背后的秘密|《102个开发者故事》第七期
|
人工智能 安全 数据中心
冲刺!阿里云在5个国家投资新建数据中心
冲刺!阿里云在5个国家投资新建数据中心
538 2
|
人工智能 算法 数据可视化
央视《新闻联播》点赞中国一汽大模型应用!
央视《新闻联播》点赞中国一汽大模型应用!
536 0
|
弹性计算
阿里云服务器免费使用1个月到期欠费了怎么办?
阿里云新账号提供云服务器免费试用1个月,试用1个月到期了怎么办?试用的云服务器是按量付费模式的,通过节省计划按0.99元/小时额度抵扣,如果到期不想用了直接释放掉即可,如果到期后想继续使用,可以将云服务器从按量付费转包年包月,并续费即可
1471 0
阿里云服务器免费使用1个月到期欠费了怎么办?