基于三方架构的网络容灾备份和恢复系统构建

本文涉及的产品
数据传输服务 DTS,数据迁移 small 3个月
推荐场景:
MySQL数据库上云
简介:

基于备份服务器,客户端和存储设备端三方架构的网络备份系统,三方架构使得备份服务器不用参与数据备份与恢复的数据传输过程,平衡了系统的负载并提高了系统的并发度。并说明网络备份系统的总体架构,备份服务器、备份代理和存储服务器子系统功能,以及通信接口,基于三方架构的网络备份系统可以很好的完成异地冷备份与恢复工作。

 

本文介绍了基于备份服务器,客户端和存储设备端三方架构的网络备份系统,三方架构使得备份服务器不用参与数据备份与恢复的数据传输过程,平衡了系统的负载并提高了系统的并发度。并说明网络备份系统的总体架构,备份服务器、备份代理和存储服务器子系统功能,以及通信接口,基于三方架构的网络备份系统可以很好的完成异地冷备份与恢复工作。

数据备份容灾领域现状
随着社会信息化的不断深入,社会对计算机系统的依赖越来越大,但传统的计算机信息系统在诸如火灾、水灾、地震、战争或人为破坏等灾难面前非常脆弱,计算机系统的硬件、数据、系统和服务都会受到不同程度的破坏。如果灾难发生在通信、金融或军事系统,如果不能够及时应付灾难,恢复系统功能,将造成不可估计的损失。
研究显示,在灾害之后,如果无法在14天内恢复信息作业,有75%的公司业务会完全停顿,43%的公司再也无法重新开业,有20%的企业在两年之内被迫宣告破产。从大量的数据上不难看到,信息安全与国家安全、民族兴衰和战争胜负息息相关。面对经济、信息全球化的趋势,我们既要看到它带给我们的发展机遇,也要正视它给我们的严峻挑战。
数据备份作为提高数据可用性与可靠性的基本方法,其目的是为了系统数据崩溃时能够快速的进行恢复。大多数企业或组织都具有自己的本地备份系统,但其恢复能力非常有限,因为传统的备份主要是采用与应用系统地理位置相同的存储设备对数据进行本地备份,进行数据备份的同时也统一在机房中管理,一旦整个机房出现了灾难,如火灾、盗窃和地震等灾难时,这些备份数据也随之销毁,本地存储设备上所存储的备份数据起不到任何容灾功能,在战争中这种问题尤为严重。专门的容灾系统也就因此应运而生。
Disaster Recovery简称DR,也称为灾难恢复系统,就是通过特定的容灾机制,能够在各种灾难损害发生后,仍然能够最大限度地保障提供正常应用服务的计算机信息系统。

数据容灾备份技术介绍
容灾备份是通过在异地建立和维护一个备份存储系统,利用地理上的分离来保证系统和数据对灾难性事件的抵御能力。根据容灾系统对灾难的抵抗程度,可分为数据容灾和应用容灾。数据容灾是指建立一个异地的数据系,该系统是对本地系统关键应用数据的复制。当出现灾难时,可将数据从异地系统迅速拷贝至本地系统从而保证业务数据的完整性与一致性。应用容灾比数据容灾层次更高,即在异地建立一套完整的、与本地数据系统相当的备份应用系统(可以同本地应用系统互为备份,也可与本地应用系统共同工作)。
在灾难出现后,远程应用系统迅速接管或承担本地应用系统的业务运行。设计一个健壮的容灾备份系统,需要考虑多方面的因素,如备份/恢复数据量大小、应用数据中心和备援数据中心之间的距离和数据传输方式、灾难发生时所要求的恢复速度、备援中心的管理及投入资金等。衡量容灾备份的程度有两个技术指标,它们是RPO(Recovery Point Objective)和RTO(Recovery Time Objective) 。
RPO即数据恢复点目标,主要指的是业务系统所能容忍的数据丢失量。RTO即恢复时间目标,主要指的是所能容忍的业务停止服务的最长时间,也就是从灾难发生到业务系统恢复服务功能所需要的最短时间周期。
网络备份系统两方架构和三方架构简介
网络备份系统的两方架构
 

 网络备份系统的三方架构
 

系统总体框架
 

备份代理
备份代理作为后台守护进程运行在需要数据备份和恢复服务的客户机上,它监听来自备份服务器的连接请求、认证备份服务器并执行通过身份认证的备份服务器发送过来的命令。备份代理的软件模块结构分为四个部分:
1.模块初始化
2.备份服务器请求监听模块
3.作业处理模块
4.网络通信模块。
 

存储服务器
存储服务器负责备份数据的存储以及恢复数据。它在后方管理着大量的存储设备(物理存储域),存储域上可以标识各种存储卷,作业的文件记录
按照一定的格式存储在存储卷中。文件记录的索引由备份服务器的目录数据库提供,根据文件索引,存储服务器会很快找到文件记录。存储服务器
的软件模块结构分为五个部分,分别是:
1.模块初始化
2.网络连接监控模块
3.作业ticket模块
4.作业处理模块
5.网络通信模块
 

备份服务器
备份服务器负责接收用户的输入,进行作业调度,向备份代理与存储服务器发送作业命令指挥其运行作业,接收作业运行的消息反馈并依照用户要求输出给Web界面。备份服务器还要负责管理系统中所定制的与备份与恢复相关的资源,存储了作业运行信息和资源元数据也由备份服务器进行管理。
备份服务器的软件架构由系统初始化,配置资源管理,用户命令交互, 作业运行管理,系统运行监控这五个主要模块组成:
 

三方模块整体通信流程
三方子系统之间的通信,无论是命令传输还是数据传输都是基于TCP/IP的,因此在整个系统可以利用现有的局域网或者广域网完成备份与恢复任务,子系统间的整体通信流程如图为:
 

 参考
开源网站http://www.bacula.org/en/

 






      本文转自glying 51CTO博客,原文链接:http://blog.51cto.com/liying/968038,如需转载请自行联系原作者





相关实践学习
RocketMQ一站式入门使用
从源码编译、部署broker、部署namesrv,使用java客户端首发消息等一站式入门RocketMQ。
Sqoop 企业级大数据迁移方案实战
Sqoop是一个用于在Hadoop和关系数据库服务器之间传输数据的工具。它用于从关系数据库(如MySQL,Oracle)导入数据到Hadoop HDFS,并从Hadoop文件系统导出到关系数据库。 本课程主要讲解了Sqoop的设计思想及原理、部署安装及配置、详细具体的使用方法技巧与实操案例、企业级任务管理等。结合日常工作实践,培养解决实际问题的能力。本课程由黑马程序员提供。
相关文章
|
11月前
|
canal 存储 算法
跨系统实时同步数据解决方案
数据量太大,单存储节点存不下,就只能把数据分片存储。
1032 0
|
2月前
|
监控 容灾 安全
规划阿里云RDS跨区迁移并构建容灾与备份策略
规划阿里云RDS(Relational Database Service)跨区迁移并构建容灾与备份策略
114 2
|
存储 运维 容灾
容灾的架构分析和容灾选择策略
容灾的架构分析和容灾选择策略
容灾的架构分析和容灾选择策略
|
容灾 安全 大数据
为数据安全而生,阿里云容灾备份方案场景实践解析
数字经济时代,数据正以超出想象的速度快速增长。短短几年,数据量已经从TB级别跃升到PB乃至ZB级别。
4918 0
|
存储 监控 容灾
一种多场景通用备份容灾方案
购链路中,因为业务对SLA的要求和下游无法保持一致,导致很多业务场景需要使用备份容灾。如当业务依赖的下游偶现异常或者超时的情况,在下游无法提供强依赖的数据时,为保证不空窗且当前业务对数据实时性要求不高时,可以使用备份数据来展示。
191 0
一种多场景通用备份容灾方案
|
存储 运维 监控
使用 NineData 快速构建企业容灾备份
使用 NineData 快速构建企业容灾备份。另外,NineData 也突破传统技术方案,推出实时日志备份:基于增量日志监听采集技术,实时获取并备份数据库中的变化数据,实现秒级 RPO 的备份能力,真正做到数据零丢失。有效保护企业的核心数据,构筑企业数据安全的最后一道防线。
283 1
使用 NineData 快速构建企业容灾备份
|
存储 弹性计算 运维
从备份升级到容灾,利用阿里云就可以做到的灾备方案
从备份升级到容灾,利用阿里云就可以做到的灾备方案
从备份升级到容灾,利用阿里云就可以做到的灾备方案
|
存储 运维 监控
技本功|数据安全之混合云环境数据库备份容灾实现
近些年,数据安全事件频发。作为企业的核心资产,数据的外泄、破坏都会导致不可挽回的经济损失和核心竞争力缺失。规范的制度建设、权限管理和变更流程是保证数据安全的重要落地措施。袋鼠云DBA团队承接多个客户的容灾架构设计需求,制定可靠、有效的容灾架构方案并推动落地。备份重于一切。我们会优先考虑数据库备份集的容灾设计:两地三中心VS混合云、权限分配&监控告警&恢复演练。
559 0
技本功|数据安全之混合云环境数据库备份容灾实现
|
存储 弹性计算 运维
云上统一数据备份-混合云备份服务
本实战介绍了面向云的统一数据备份 – HBR对ECS,NAS,OSS以及云下数据的企业级数据保护方法以及基于HBR的云上数据统一备份实践。
683 0
云上统一数据备份-混合云备份服务
|
存储 缓存 网络协议
基于云存储网关的Veeam备份归档上云方案
传统备份厂商的异地备份方案是将数据备份至异地机房来保护数据。公共云的出现改变了异地备份的方案和架构。用户在面对公共云和传统备份架构时,该如何选择呢?本文结合Veeam备份软件的使用,一方面来阐述Veeam是如何与云存储网关产品结合将数据备份上云,另一方面也试着给出一些看法和建议。
1900 0