为什么需要备份恢复
为满足监管要求
防止管理员误操作后,错误数据同步到所有副本,导致数据无法恢复
防止数据库因各种故障而造成数据丢失,降低灾难性数据丢失的风险,从而达到灾难恢复的目的
硬盘驱动器损坏
黑客攻击、病毒
自然灾害、电源浪涌、磁干扰
物理备份/恢复方案的系统架构
OceanBase 数据库支持 OSS 、 NFS 、COS三种备份介质。
OceanBase 数据库从 V2.2.52 版本开始支持集群级别的物理备份。
物理备份由基线数据、日志归档数据两种数据组成:
日志归档是指日志数据的自动归档功能,OBServer 会定期将日志数据归档到指定的备份路径。这个动作是全自动的,不需要外部定期触发。
数据备份指的是备份基线数据的功能,该功能分为全量备份和增量备份两种
备份恢复数据
支持基线数据和增量数据备份
内部数据按照存储方式,可以化分为基于MemTable格式的增量数据和基于 SSTable格式的基线数据
基线数据:最后一次合并落盘的数据之和
增量数据:是当前合并时间点以后的所有更新数据,一般会存储在MemTable的内存表中,同时也会实例化为 Commit Log文件的形式存放在硬盘上
支持数据库上的任何操作
OceanBase的备份恢复支持数据库上的任何操作;
包括用户权限、表定义、租户定义、系统变量、用户信息、视图信息等逻辑数据以及所有的物理数据。
支持集群级和租户级备份
OceanBase的备份恢复目前支持的最小粒度是租户;
可以按需只备份恢复某个租户而不是整个集群,从而增加了备份恢复的灵活性,节省了空间。
物理备份介绍
数据备份指的是备份基线数据的功能,该功能分为全量备份和增量备份两种:
1.全量备份是指备份所有的需要基线的宏块。
2.增量备份是指备份上一次备份以后新增和修改过的宏块
日志归档是定期备份到备份目的端的,只需要用户发起一次alter system archivelog,日志备份就会在后台持续进行
物理备份操作方法:
1.部署NFS,所有OBServer都要连接到NFS服务器(或采用OSS服务器)
2.执行备份
2.1 配置备份目的地 : 执行 Alter system 语句配置备份目的
NFS:obclient> ALTER SYSTEM SET backup_dest='file:///data/nfs/backup'; OSS:obclient> ALTER SYSTEM SET backup_dest='oss://XXXXXXXXXXXXXXXXXXXXXXX';
2.2 启动 Oceanbase 的数据库日志归档功能
obclient> ALTER SYSTEM ARCHIVELOG;
2.3 执行全量备份或增量备份
obclient> ALTER SYSTEM MAJOR FREEZE; <--------执行全量备份前,对集群进行一次合并 obclient> SET ENCRYPTION ON IDENTIFIED BY 'password' ONLY; <----设置备份密码(可选) obclient> ALTER SYSTEM BACKUP DATABASE; <-------执行全量备份 obclient> Alter system backup incremental database; <-------执行增量备份, 确保已经有全量备份存在
3 查看任务状态
obclient> SELECT * FROM CDB_OB_BACKUP_PROGRESS; <---------- 查看备份任务 obclient> SELECT * FROM CDB_OB_BACKUP_SET_DETAILS; <-----查看备份任务历史
物理恢复介绍
在目的集群上用建立恢复租户需要的unit 与resource pool。
通过 ALTER SYSTEM RESTORE TENANT 命令调度租户恢复任务。 对于备份恢复来说,restore tenant 命令内部的流程如下:
1. 创建恢复用的租户
2. 恢复租户的系统表数据
3. 恢复租户的系统表日志
4. 调整恢复租户的元信息
5. 恢复租户的用户表数据
6. 恢复租户的用户表日志
7. 恢复扫尾工作
物理恢复操作方法
1、停止日志备份
obclient> ALTER SYSTEM NOARCHIVELOG;
2、执行恢复
2.1 创建恢复目标租户需要用到的 Unit、resource pool
unit:obclient> CREATE RESOURCE UNIT XXXXXXXXXXXXXXXXXXXXXXX; resource pool:obclient>CREATE RESOURCE POOL XXXXXXXXXXXXXX;
2.2 设置加密信息 , 以及恢复密码(如果未加密,或者恢复时可以访问原来的 KMS,跳过本步骤; 恢复密码是备份时添加了密码场景才需要)
obclient> SET @kms_encrypt_info = '<加密string>' <----值为EXTERNAL_KMS_INFO 的值 obclient> SET DECRYPTION IDENTIFIED BY 'password1','password2'; <----备份时设置的“全量备份”,“增量备份”的密码,未设置可 跳过次步骤
2.3打开恢复配置、执行恢复任务
obclient> ALTER SYSTEM SET restore_concurrency = 50; <-----检查 restore_concurrency 是否为0,为0 的话需要执行这条语句 obclient> ALTER SYSTEM RESTORE <dest_tenantname> FROM <source_tenantname> at 'uri' UNTIL 'timestamp' WITH 'restore_option’;
3、查看任务状态
obclient> SELECT svr_ip,role, is_restore, COUNT(*) FROM __all_virtual_meta_table AS a, (SELECT value FROM __all_restore_info WHERE name='tenant_id') AS b WHERE a.tenant_id=b.value GROUP BY role, is_restore, svr_ip ORDER BY svr_ip, is_restore; obclient> SELECT * FROM __all_restore_info;
OB提供迁移服务,支持同构或异构RDBMS与OceanBase之间进行数据交互的服务
OMS的功能体系可以分为服务接入层、流程编排层、组件链路层
OMS主要应用场景包括数据库不停服迁移和数据实时同步
OB数据库支持 OSS 和 NFS 两种备份介质
OB支持基线数据和增量数据备份,支持数据库上的任何操作的备份、支持集群级备份和租户级备份
OB物理备份恢复需要在目的集群上用建立恢复租户需要的unit 与 resource pool