自研一体化分布式架构数据库-OceanBase

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
简介: 本文整理自OceanBase社区布道师周跃跃,在如何构建简单高效的现代化数据栈的分享。

自研一体化分布式架构数据库-OceanBase

摘要:本文整理自OceanBase社区布道师周跃跃,在如何构建简单高效的现代化数据栈的分享。

本篇内容主要分为三个部分:

1.发展历史

2.核心特性助力企业系统选型

3.用户眼中的OceanBase


一、发展历史


image.png


从2010年至今,OceanBase经历了22年的技术发展。在这个过程中,其发展可以分成三个阶段。第一代的分布式存储系统;第二代的分布式数据库;第三代的分布式HTAP 数据库。


image.png


2021年6月1日,OceanBase进行开源,服务了更多的用户。OceanBases由业务需求立项,到承担核心业务的全部流量,产品发展与业务高度契合。


其次,业务驱动了产品的迭代和发展。从内部到外部的场景和企业,OceanBases经过12年的产品打磨和验证。产品的稳定性和性能,不但满足了核心企业的场景需求,还完善了周边的工具生态。


二、核心特性助力企业系统选型


image.png

右图是OceanBase一体化架构。OceanBase的每个节点均有自己的SQL引擎和存储引擎,自主管理各自承载的数据分区,TCP/IP互通,协同服务。


多副本和Paxos分布式协议的高效高可靠工程实现,确保数据(日志)持久化在多数派节点成功。


image.png


接下来,介绍下OceanBase的产品特性,这也是企业用户在选型时特别关注的。OceanBase的核心特性主要有六点,即高可用、低成本、高兼容、高扩展、混合负载、多租户。


image.png


OceanBase的高可用性,是基于Paxos协议的典型三副本部署方案,通过Paxos协议保证数据的强一致性。当出现单机、机房或城市级故障,整个服务可以自动切换,持续可用。


所以基于OceanBase的高可用性,用户可以做到两地三中心、三地五中心以及单元化的部署方案,实现整个业务数据集群的高可用。


image.png


在低成本方面,OceanBase基于LSM Tree进行存储管理。主要包括基线数据和增量数据。


其次,OceanBase的存储成本大概是MySQL的三分之一到四分之一。 MySQL的一主两从,对应OB三节点时的三副本,在默认参数下存储成本低,在历史归档业务方面,也有很好的表现。


image.png


目前,OceanBase兼容MySQL 5.6的绝大部分语法以及部分8.0的新特性。在生态方面,可以使用MySQL周边生态工具操作OceanBase,比如Navicat、dbeaver、datax、canal等。


image.png


在高扩展性方面,OceanBase的集群节点全对等,每个节点都具备计算和存储能力,无单点瓶颈,可线性、在线扩展和收缩。在节省成本的同时,兼具分布式系统的扩展性和关系数据库的易用性和灵活性。


image.png


OceanBase的SQL引擎,满足OLTP和OLAP;OceanBase数据库,支持读写分离,满足ETL取数,BI查询和MySQL已有的读写分离环境。


image.png


左图是OceanBase集群的原生多租户架构图,资源隔离不但可以让一套集群运行的多个业务,互相之间资源不会出现争抢,还可以灵活弹性的控制单个租户的资源使用情况,减少运维压力,合理使用资源。


三、用户眼中的OceanBase


image.png


从用户的角度来看,OceanBase使用稳定,运营轻松。其次,OceanBase降本增效的效果非常明显。第三,OceanBase的周边工具、周边生态非常完善。


image.png


在同等条件下,OceanBase通过行列混合存储全功能型副本日志型副本只读型副本,其存储成本只有MySQL的三分之一到四分之一。


OceanBase通过高度兼容分布式扩展资源隔离的多租户的一套集群,替代多套MySQL环境,同时用户在使用习惯上与MySQL差异很小。


image.png


OceanBase基于Paxos的一体化架构设计,减少不必要的rpc交互,尽可能的实现本地读写,同时可以进行更为灵活的性能调优,有效降低rpc消耗。


image.png


在生态工具方面,用户可以自建一套部署环境,用OCP管理平台白屏操作或者通过api调用实现集群管理,租户管理和备份与恢复。


image.png


环境部署之后,用户需要进行迁移数据。通过OMS的白屏化操作,实现数据迁移与校验。目前,OceanBase支持MySQL和OB的双向迁移,以及OB间的数据迁移。


数据作为企业最核心的资产,通过数据库进行管理。作为一款基础软件,数据库对使用者来说,产品验证和替换周期较长。目前OceanBase 社区版已经运行在超过 50家企业生产环境,包括:京东,银联,携程,58同城,360,红象云腾,六棱镜Gitee中国,CSDN等企业

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
2月前
|
SQL 关系型数据库 MySQL
乐观锁在分布式数据库中如何与事务隔离级别结合使用
乐观锁在分布式数据库中如何与事务隔离级别结合使用
|
12天前
|
安全 应用服务中间件 API
微服务分布式系统架构之zookeeper与dubbo-2
微服务分布式系统架构之zookeeper与dubbo-2
|
12天前
|
负载均衡 Java 应用服务中间件
微服务分布式系统架构之zookeeper与dubbor-1
微服务分布式系统架构之zookeeper与dubbor-1
|
20天前
|
NoSQL 关系型数据库 MySQL
微服务架构下的数据库选择:MySQL、PostgreSQL 还是 NoSQL?
在微服务架构中,数据库的选择至关重要。不同类型的数据库适用于不同的需求和场景。在本文章中,我们将深入探讨传统的关系型数据库(如 MySQL 和 PostgreSQL)与现代 NoSQL 数据库的优劣势,并分析在微服务架构下的最佳实践。
|
20天前
|
设计模式 缓存 关系型数据库
探索微服务架构中的数据库设计挑战
微服务架构因其模块化和高扩展性被广泛应用于现代软件开发。然而,这种架构模式也带来了数据库设计上的独特挑战。本文探讨了在微服务架构中实现数据库设计时面临的问题,如数据一致性、服务间的数据共享和分布式事务处理。通过分析实际案例和提出解决方案,旨在为开发人员提供有效的数据库设计策略,以应对微服务架构下的复杂性。
|
20天前
|
消息中间件 缓存 监控
优化微服务架构中的数据库访问:策略与最佳实践
在微服务架构中,数据库访问的效率直接影响到系统的性能和可扩展性。本文探讨了优化微服务架构中数据库访问的策略与最佳实践,包括数据分片、缓存策略、异步处理和服务间通信优化。通过具体的技术方案和实例分析,提供了一系列实用的建议,以帮助开发团队提升微服务系统的响应速度和稳定性。
|
1月前
|
存储 JSON 数据库
Elasticsearch 分布式架构解析
【9月更文第2天】Elasticsearch 是一个分布式的搜索和分析引擎,以其高可扩展性和实时性著称。它基于 Lucene 开发,但提供了更高级别的抽象,使得开发者能够轻松地构建复杂的搜索应用。本文将深入探讨 Elasticsearch 的分布式存储和检索机制,解释其背后的原理及其优势。
102 5
|
2月前
|
存储 SQL 分布式数据库
OceanBase 入门:分布式数据库的基础概念
【8月更文第31天】在当今的大数据时代,随着业务规模的不断扩大,传统的单机数据库已经难以满足高并发、大数据量的应用需求。分布式数据库应运而生,成为解决这一问题的有效方案之一。本文将介绍一款由阿里巴巴集团自主研发的分布式数据库——OceanBase,并通过一些基础概念和实际代码示例来帮助读者理解其工作原理。
123 0
|
20天前
|
消息中间件 缓存 监控
优化微服务架构中的数据库访问:策略与实践
随着微服务架构的普及,如何高效管理和优化数据库访问成为了关键挑战。本文探讨了在微服务环境中优化数据库访问的策略,包括数据库分片、缓存机制、异步处理等技术手段。通过深入分析实际案例和最佳实践,本文旨在为开发者提供实际可行的解决方案,以提升系统性能和可扩展性。
|
2月前
|
存储 缓存 负载均衡
【PolarDB-X 技术揭秘】Lizard B+tree:揭秘分布式数据库索引优化的终极奥秘!
【8月更文挑战第25天】PolarDB-X是阿里云的一款分布式数据库产品,其核心组件Lizard B+tree针对分布式环境优化,解决了传统B+tree面临的数据分片与跨节点查询等问题。Lizard B+tree通过一致性哈希实现数据分片,确保分布式一致性;智能分区实现了负载均衡;高效的搜索算法与缓存机制降低了查询延迟;副本机制确保了系统的高可用性。此外,PolarDB-X通过自适应分支因子、缓存优化、异步写入、数据压缩和智能分片等策略进一步提升了Lizard B+tree的性能,使其能够在分布式环境下提供高性能的索引服务。这些优化不仅提高了查询速度,还确保了系统的稳定性和可靠性。
62 5
下一篇
无影云桌面