自研一体化分布式架构数据库-OceanBase

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
简介: 本文整理自OceanBase社区布道师周跃跃,在如何构建简单高效的现代化数据栈的分享。

自研一体化分布式架构数据库-OceanBase

摘要:本文整理自OceanBase社区布道师周跃跃,在如何构建简单高效的现代化数据栈的分享。

本篇内容主要分为三个部分:

1.发展历史

2.核心特性助力企业系统选型

3.用户眼中的OceanBase


一、发展历史


image.png


从2010年至今,OceanBase经历了22年的技术发展。在这个过程中,其发展可以分成三个阶段。第一代的分布式存储系统;第二代的分布式数据库;第三代的分布式HTAP 数据库。


image.png


2021年6月1日,OceanBase进行开源,服务了更多的用户。OceanBases由业务需求立项,到承担核心业务的全部流量,产品发展与业务高度契合。


其次,业务驱动了产品的迭代和发展。从内部到外部的场景和企业,OceanBases经过12年的产品打磨和验证。产品的稳定性和性能,不但满足了核心企业的场景需求,还完善了周边的工具生态。


二、核心特性助力企业系统选型


image.png

右图是OceanBase一体化架构。OceanBase的每个节点均有自己的SQL引擎和存储引擎,自主管理各自承载的数据分区,TCP/IP互通,协同服务。


多副本和Paxos分布式协议的高效高可靠工程实现,确保数据(日志)持久化在多数派节点成功。


image.png


接下来,介绍下OceanBase的产品特性,这也是企业用户在选型时特别关注的。OceanBase的核心特性主要有六点,即高可用、低成本、高兼容、高扩展、混合负载、多租户。


image.png


OceanBase的高可用性,是基于Paxos协议的典型三副本部署方案,通过Paxos协议保证数据的强一致性。当出现单机、机房或城市级故障,整个服务可以自动切换,持续可用。


所以基于OceanBase的高可用性,用户可以做到两地三中心、三地五中心以及单元化的部署方案,实现整个业务数据集群的高可用。


image.png


在低成本方面,OceanBase基于LSM Tree进行存储管理。主要包括基线数据和增量数据。


其次,OceanBase的存储成本大概是MySQL的三分之一到四分之一。 MySQL的一主两从,对应OB三节点时的三副本,在默认参数下存储成本低,在历史归档业务方面,也有很好的表现。


image.png


目前,OceanBase兼容MySQL 5.6的绝大部分语法以及部分8.0的新特性。在生态方面,可以使用MySQL周边生态工具操作OceanBase,比如Navicat、dbeaver、datax、canal等。


image.png


在高扩展性方面,OceanBase的集群节点全对等,每个节点都具备计算和存储能力,无单点瓶颈,可线性、在线扩展和收缩。在节省成本的同时,兼具分布式系统的扩展性和关系数据库的易用性和灵活性。


image.png


OceanBase的SQL引擎,满足OLTP和OLAP;OceanBase数据库,支持读写分离,满足ETL取数,BI查询和MySQL已有的读写分离环境。


image.png


左图是OceanBase集群的原生多租户架构图,资源隔离不但可以让一套集群运行的多个业务,互相之间资源不会出现争抢,还可以灵活弹性的控制单个租户的资源使用情况,减少运维压力,合理使用资源。


三、用户眼中的OceanBase


image.png


从用户的角度来看,OceanBase使用稳定,运营轻松。其次,OceanBase降本增效的效果非常明显。第三,OceanBase的周边工具、周边生态非常完善。


image.png


在同等条件下,OceanBase通过行列混合存储全功能型副本日志型副本只读型副本,其存储成本只有MySQL的三分之一到四分之一。


OceanBase通过高度兼容分布式扩展资源隔离的多租户的一套集群,替代多套MySQL环境,同时用户在使用习惯上与MySQL差异很小。


image.png


OceanBase基于Paxos的一体化架构设计,减少不必要的rpc交互,尽可能的实现本地读写,同时可以进行更为灵活的性能调优,有效降低rpc消耗。


image.png


在生态工具方面,用户可以自建一套部署环境,用OCP管理平台白屏操作或者通过api调用实现集群管理,租户管理和备份与恢复。


image.png


环境部署之后,用户需要进行迁移数据。通过OMS的白屏化操作,实现数据迁移与校验。目前,OceanBase支持MySQL和OB的双向迁移,以及OB间的数据迁移。


数据作为企业最核心的资产,通过数据库进行管理。作为一款基础软件,数据库对使用者来说,产品验证和替换周期较长。目前OceanBase 社区版已经运行在超过 50家企业生产环境,包括:京东,银联,携程,58同城,360,红象云腾,六棱镜Gitee中国,CSDN等企业

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
3月前
|
SQL 关系型数据库 MySQL
乐观锁在分布式数据库中如何与事务隔离级别结合使用
乐观锁在分布式数据库中如何与事务隔离级别结合使用
|
1月前
|
SQL 关系型数据库 MySQL
乐观锁在分布式数据库中如何与事务隔离级别结合使用
乐观锁在分布式数据库中如何与事务隔离级别结合使用
|
2月前
|
安全 应用服务中间件 API
微服务分布式系统架构之zookeeper与dubbo-2
微服务分布式系统架构之zookeeper与dubbo-2
|
2月前
|
负载均衡 Java 应用服务中间件
微服务分布式系统架构之zookeeper与dubbor-1
微服务分布式系统架构之zookeeper与dubbor-1
|
2月前
|
存储 JSON 数据库
Elasticsearch 分布式架构解析
【9月更文第2天】Elasticsearch 是一个分布式的搜索和分析引擎,以其高可扩展性和实时性著称。它基于 Lucene 开发,但提供了更高级别的抽象,使得开发者能够轻松地构建复杂的搜索应用。本文将深入探讨 Elasticsearch 的分布式存储和检索机制,解释其背后的原理及其优势。
203 5
|
3月前
|
存储 SQL 分布式数据库
OceanBase 入门:分布式数据库的基础概念
【8月更文第31天】在当今的大数据时代,随着业务规模的不断扩大,传统的单机数据库已经难以满足高并发、大数据量的应用需求。分布式数据库应运而生,成为解决这一问题的有效方案之一。本文将介绍一款由阿里巴巴集团自主研发的分布式数据库——OceanBase,并通过一些基础概念和实际代码示例来帮助读者理解其工作原理。
327 0
|
16天前
|
关系型数据库 分布式数据库 数据库
PostgreSQL+Citus分布式数据库
PostgreSQL+Citus分布式数据库
49 15
|
1月前
|
运维 供应链 安全
SD-WAN分布式组网:构建高效、灵活的企业网络架构
本文介绍了SD-WAN(软件定义广域网)在企业分布式组网中的应用,强调其智能化流量管理、简化的网络部署、弹性扩展能力和增强的安全性等核心优势,以及在跨国企业、多云环境、零售连锁和制造业中的典型应用场景。通过合理设计网络架构、选择合适的网络连接类型、优化应用流量优先级和定期评估网络性能等最佳实践,SD-WAN助力企业实现高效、稳定的业务连接,加速数字化转型。
SD-WAN分布式组网:构建高效、灵活的企业网络架构
|
1月前
|
消息中间件 关系型数据库 Java
‘分布式事务‘ 圣经:从入门到精通,架构师尼恩最新、最全详解 (50+图文4万字全面总结 )
本文 是 基于尼恩之前写的一篇 分布式事务的文章 升级而来 , 尼恩之前写的 分布式事务的文章, 在全网阅读量 100万次以上 , 被很多培训机构 作为 顶级教程。 此文修改了 老版本的 一个大bug , 大家不要再看老版本啦。
|
1月前
|
SQL 关系型数据库 分布式数据库
Citus 简介,将 Postgres 转换为分布式数据库
【10月更文挑战第4天】Citus 简介,将 Postgres 转换为分布式数据库
88 4

热门文章

最新文章

下一篇
无影云桌面