自研一体化分布式架构数据库-OceanBase

简介: 本文整理自OceanBase社区布道师周跃跃,在如何构建简单高效的现代化数据栈的分享。

自研一体化分布式架构数据库-OceanBase

摘要:本文整理自OceanBase社区布道师周跃跃,在如何构建简单高效的现代化数据栈的分享。

本篇内容主要分为三个部分:

1.发展历史

2.核心特性助力企业系统选型

3.用户眼中的OceanBase


一、发展历史


image.png


从2010年至今,OceanBase经历了22年的技术发展。在这个过程中,其发展可以分成三个阶段。第一代的分布式存储系统;第二代的分布式数据库;第三代的分布式HTAP 数据库。


image.png


2021年6月1日,OceanBase进行开源,服务了更多的用户。OceanBases由业务需求立项,到承担核心业务的全部流量,产品发展与业务高度契合。


其次,业务驱动了产品的迭代和发展。从内部到外部的场景和企业,OceanBases经过12年的产品打磨和验证。产品的稳定性和性能,不但满足了核心企业的场景需求,还完善了周边的工具生态。


二、核心特性助力企业系统选型


image.png

右图是OceanBase一体化架构。OceanBase的每个节点均有自己的SQL引擎和存储引擎,自主管理各自承载的数据分区,TCP/IP互通,协同服务。


多副本和Paxos分布式协议的高效高可靠工程实现,确保数据(日志)持久化在多数派节点成功。


image.png


接下来,介绍下OceanBase的产品特性,这也是企业用户在选型时特别关注的。OceanBase的核心特性主要有六点,即高可用、低成本、高兼容、高扩展、混合负载、多租户。


image.png


OceanBase的高可用性,是基于Paxos协议的典型三副本部署方案,通过Paxos协议保证数据的强一致性。当出现单机、机房或城市级故障,整个服务可以自动切换,持续可用。


所以基于OceanBase的高可用性,用户可以做到两地三中心、三地五中心以及单元化的部署方案,实现整个业务数据集群的高可用。


image.png


在低成本方面,OceanBase基于LSM Tree进行存储管理。主要包括基线数据和增量数据。


其次,OceanBase的存储成本大概是MySQL的三分之一到四分之一。 MySQL的一主两从,对应OB三节点时的三副本,在默认参数下存储成本低,在历史归档业务方面,也有很好的表现。


image.png


目前,OceanBase兼容MySQL 5.6的绝大部分语法以及部分8.0的新特性。在生态方面,可以使用MySQL周边生态工具操作OceanBase,比如Navicat、dbeaver、datax、canal等。


image.png


在高扩展性方面,OceanBase的集群节点全对等,每个节点都具备计算和存储能力,无单点瓶颈,可线性、在线扩展和收缩。在节省成本的同时,兼具分布式系统的扩展性和关系数据库的易用性和灵活性。


image.png


OceanBase的SQL引擎,满足OLTP和OLAP;OceanBase数据库,支持读写分离,满足ETL取数,BI查询和MySQL已有的读写分离环境。


image.png


左图是OceanBase集群的原生多租户架构图,资源隔离不但可以让一套集群运行的多个业务,互相之间资源不会出现争抢,还可以灵活弹性的控制单个租户的资源使用情况,减少运维压力,合理使用资源。


三、用户眼中的OceanBase


image.png


从用户的角度来看,OceanBase使用稳定,运营轻松。其次,OceanBase降本增效的效果非常明显。第三,OceanBase的周边工具、周边生态非常完善。


image.png


在同等条件下,OceanBase通过行列混合存储,全功能型副本,日志型副本和只读型副本,其存储成本只有MySQL的三分之一到四分之一。


OceanBase通过高度兼容、分布式扩展、资源隔离的多租户的一套集群,替代多套MySQL环境,同时用户在使用习惯上与MySQL差异很小。


image.png


OceanBase基于Paxos的一体化架构设计,减少不必要的rpc交互,尽可能的实现本地读写,同时可以进行更为灵活的性能调优,有效降低rpc消耗。


image.png


在生态工具方面,用户可以自建一套部署环境,用OCP管理平台白屏操作或者通过api调用实现集群管理,租户管理和备份与恢复。


image.png


环境部署之后,用户需要进行迁移数据。通过OMS的白屏化操作,实现数据迁移与校验。目前,OceanBase支持MySQL和OB的双向迁移,以及OB间的数据迁移。


数据作为企业最核心的资产,通过数据库进行管理。作为一款基础软件,数据库对使用者来说,产品验证和替换周期较长。目前OceanBase 社区版已经运行在超过 50家企业生产环境,包括:京东,银联,携程,58同城,360,红象云腾,六棱镜,Gitee中国,CSDN等企业。

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
负载均衡 算法 关系型数据库
大数据大厂之MySQL数据库课程设计:揭秘MySQL集群架构负载均衡核心算法:从理论到Java代码实战,让你的数据库性能飙升!
本文聚焦 MySQL 集群架构中的负载均衡算法,阐述其重要性。详细介绍轮询、加权轮询、最少连接、加权最少连接、随机、源地址哈希等常用算法,分析各自优缺点及适用场景。并提供 Java 语言代码实现示例,助力直观理解。文章结构清晰,语言通俗易懂,对理解和应用负载均衡算法具有实用价值和参考价值。
大数据大厂之MySQL数据库课程设计:揭秘MySQL集群架构负载均衡核心算法:从理论到Java代码实战,让你的数据库性能飙升!
|
存储 监控 分布式数据库
ClickHouse分布式数据库动态伸缩(弹性扩缩容)的实现
实现ClickHouse数据库的动态伸缩需要持续的维护和精细的操作。从集群配置到数据迁移,再到监控和自动化,每一步都要仔细管理以确保服务的可靠性和性能。这些活动可以显著提高应用的响应性和成本效率,帮助业务根据实际需求灵活调整资源分配。
738 10
|
存储 关系型数据库 分布式数据库
【赵渝强老师】基于PostgreSQL的分布式数据库:Citus
Citus 是基于 PostgreSQL 的开源分布式数据库,采用 shared nothing 架构,具备良好的扩展性。它以插件形式集成,部署简单,适用于处理大规模数据和高并发场景。本文介绍了 Citus 的基础概念、安装配置步骤及其在单机环境下的集群搭建方法。
1213 2
|
存储 关系型数据库 数据库
高性能云盘:一文解析RDS数据库存储架构升级
性能、成本、弹性,是客户实际使用数据库过程中关注的三个重要方面。RDS业界率先推出的高性能云盘(原通用云盘),是PaaS层和IaaS层的深度融合的技术最佳实践,通过使用不同的存储介质,为客户提供同时满足低成本、低延迟、高持久性的体验。
|
存储 Cloud Native 关系型数据库
PolarDB开源:云原生数据库的架构革命
本文围绕开源核心价值、社区运营实践和技术演进路线展开。首先解读存算分离架构的三大突破,包括基于RDMA的分布式存储、计算节点扩展及存储池扩容机制,并强调与MySQL的高兼容性。其次分享阿里巴巴开源治理模式,涵盖技术决策、版本发布和贡献者成长体系,同时展示企业应用案例。最后展望技术路线图,如3.0版本的多写多读架构、智能调优引擎等特性,以及开发者生态建设举措,推荐使用PolarDB-Operator实现高效部署。
700 4
|
存储 关系型数据库 MySQL
【赵渝强老师】OceanBase数据库从零开始:MySQL模式
《OceanBase数据库从零开始:MySQL模式》是一门包含11章的课程,涵盖OceanBase分布式数据库的核心内容。从体系架构、安装部署到租户管理、用户安全,再到数据库对象操作、事务与锁机制,以及应用程序开发、备份恢复、数据迁移等方面进行详细讲解。此外,还涉及连接路由管理和监控诊断等高级主题,帮助学员全面掌握OceanBase数据库的使用与管理。
804 5
|
负载均衡 算法 关系型数据库
大数据新视界--大数据大厂之MySQL数据库课程设计:MySQL集群架构负载均衡故障排除与解决方案
本文深入探讨 MySQL 集群架构负载均衡的常见故障及排除方法。涵盖请求分配不均、节点无法响应、负载均衡器故障等现象,介绍多种负载均衡算法及故障排除步骤,包括检查负载均衡器状态、调整算法、诊断修复节点故障等。还阐述了预防措施与确保系统稳定性的方法,如定期监控维护、备份恢复策略、团队协作与知识管理等。为确保 MySQL 数据库系统高可用性提供全面指导。
|
SQL 存储 分布式数据库
分布式存储数据恢复—hbase和hive数据库数据恢复案例
分布式存储数据恢复环境: 16台某品牌R730xd服务器节点,每台服务器节点上有数台虚拟机。 虚拟机上部署Hbase和Hive数据库。 分布式存储故障: 数据库底层文件被误删除,数据库不能使用。要求恢复hbase和hive数据库。
764 12
|
人工智能 JavaScript 安全
【01】Java+若依+vue.js技术栈实现钱包积分管理系统项目-商业级电玩城积分系统商业项目实战-需求改为思维导图-设计数据库-确定基础架构和设计-优雅草卓伊凡商业项目实战
【01】Java+若依+vue.js技术栈实现钱包积分管理系统项目-商业级电玩城积分系统商业项目实战-需求改为思维导图-设计数据库-确定基础架构和设计-优雅草卓伊凡商业项目实战
1791 13
【01】Java+若依+vue.js技术栈实现钱包积分管理系统项目-商业级电玩城积分系统商业项目实战-需求改为思维导图-设计数据库-确定基础架构和设计-优雅草卓伊凡商业项目实战

热门文章

最新文章

推荐镜像

更多