基于三方架构的网络容灾备份和恢复系统构建

简介:

基于备份服务器,客户端和存储设备端三方架构的网络备份系统,三方架构使得备份服务器不用参与数据备份与恢复的数据传输过程,平衡了系统的负载并提高了系统的并发度。并说明网络备份系统的总体架构,备份服务器、备份代理和存储服务器子系统功能,以及通信接口,基于三方架构的网络备份系统可以很好的完成异地冷备份与恢复工作。

本文介绍了基于备份服务器,客户端和存储设备端三方架构的网络备份系统,三方架构使得备份服务器不用参与数据备份与恢复的数据传输过程,平衡了系统的负载并提高了系统的并发度。并说明网络备份系统的总体架构,备份服务器、备份代理和存储服务器子系统功能,以及通信接口,基于三方架构的网络备份系统可以很好的完成异地冷备份与恢复工作。

数据备份容灾领域现状
随着社会信息化的不断深入,社会对计算机系统的依赖越来越大,但传统的计算机信息系统在诸如火灾、水灾、地震、战争或人为破坏等灾难面前非常脆弱,计算机系统的硬件、数据、系统和服务都会受到不同程度的破坏。如果灾难发生在通信、金融或军事系统,如果不能够及时应付灾难,恢复系统功能,将造成不可估计的损失。
研究显示,在灾害之后,如果无法在14天内恢复信息作业,有75%的公司业务会完全停顿,43%的公司再也无法重新开业,有20%的企业在两年之内被迫宣告破产。从大量的数据上不难看到,信息安全与国家安全、民族兴衰和战争胜负息息相关。面对经济、信息全球化的趋势,我们既要看到它带给我们的发展机遇,也要正视它给我们的严峻挑战。
数据备份作为提高数据可用性与可靠性的基本方法,其目的是为了系统数据崩溃时能够快速的进行恢复。大多数企业或组织都具有自己的本地备份系统,但其恢复能力非常有限,因为传统的备份主要是采用与应用系统地理位置相同的存储设备对数据进行本地备份,进行数据备份的同时也统一在机房中管理,一旦整个机房出现了灾难,如火灾、盗窃和地震等灾难时,这些备份数据也随之销毁,本地存储设备上所存储的备份数据起不到任何容灾功能,在战争中这种问题尤为严重。专门的容灾系统也就因此应运而生。
Disaster Recovery简称DR,也称为灾难恢复系统,就是通过特定的容灾机制,能够在各种灾难损害发生后,仍然能够最大限度地保障提供正常应用服务的计算机信息系统。

数据容灾备份技术介绍
容灾备份是通过在异地建立和维护一个备份存储系统,利用地理上的分离来保证系统和数据对灾难性事件的抵御能力。根据容灾系统对灾难的抵抗程度,可分为数据容灾和应用容灾。数据容灾是指建立一个异地的数据系,该系统是对本地系统关键应用数据的复制。当出现灾难时,可将数据从异地系统迅速拷贝至本地系统从而保证业务数据的完整性与一致性。应用容灾比数据容灾层次更高,即在异地建立一套完整的、与本地数据系统相当的备份应用系统(可以同本地应用系统互为备份,也可与本地应用系统共同工作)。
在灾难出现后,远程应用系统迅速接管或承担本地应用系统的业务运行。设计一个健壮的容灾备份系统,需要考虑多方面的因素,如备份/恢复数据量大小、应用数据中心和备援数据中心之间的距离和数据传输方式、灾难发生时所要求的恢复速度、备援中心的管理及投入资金等。衡量容灾备份的程度有两个技术指标,它们是RPO(Recovery Point Objective)和RTO(Recovery Time Objective) 。
RPO即数据恢复点目标,主要指的是业务系统所能容忍的数据丢失量。RTO即恢复时间目标,主要指的是所能容忍的业务停止服务的最长时间,也就是从灾难发生到业务系统恢复服务功能所需要的最短时间周期。
网络备份系统两方架构和三方架构简介
网络备份系统的两方架构
 



网络备份系统的三方架构



系统总体框架



备份代理
备份代理作为后台守护进程运行在需要数据备份和恢复服务的客户机上,它监听来自备份服务器的连接请求、认证备份服务器并执行通过身份认证的备份服务器发送过来的命令。备份代理的软件模块结构分为四个部分:
1.模块初始化
2.备份服务器请求监听模块
3.作业处理模块
4.网络通信模块。
 



存储服务器
存储服务器负责备份数据的存储以及恢复数据。它在后方管理着大量的存储设备(物理存储域),存储域上可以标识各种存储卷,作业的文件记录
按照一定的格式存储在存储卷中。文件记录的索引由备份服务器的目录数据库提供,根据文件索引,存储服务器会很快找到文件记录。存储服务器
的软件模块结构分为五个部分,分别是:
1.模块初始化
2.网络连接监控模块
3.作业ticket模块
4.作业处理模块
5.网络通信模块
 



备份服务器
备份服务器负责接收用户的输入,进行作业调度,向备份代理与存储服务器发送作业命令指挥其运行作业,接收作业运行的消息反馈并依照用户要求输出给Web界面。备份服务器还要负责管理系统中所定制的与备份与恢复相关的资源,存储了作业运行信息和资源元数据也由备份服务器进行管理。
备份服务器的软件架构由系统初始化,配置资源管理,用户命令交互, 作业运行管理,系统运行监控这五个主要模块组成:
 



三方模块整体通信流程
三方子系统之间的通信,无论是命令传输还是数据传输都是基于TCP/IP的,因此在整个系统可以利用现有的局域网或者广域网完成备份与恢复任务,子系统间的整体通信流程如图为:
 



参考
开源网站http://www.bacula.org/en/

 












本文转自百度技术51CTO博客,原文链接:http://blog.51cto.com/baidutech/748584 ,如需转载请自行联系原作者
相关实践学习
自建数据库迁移到云数据库
本场景将引导您将网站的自建数据库平滑迁移至云数据库RDS。通过使用RDS,您可以获得稳定、可靠和安全的企业级数据库服务,可以更加专注于发展核心业务,无需过多担心数据库的管理和维护。
Sqoop 企业级大数据迁移方案实战
Sqoop是一个用于在Hadoop和关系数据库服务器之间传输数据的工具。它用于从关系数据库(如MySQL,Oracle)导入数据到Hadoop HDFS,并从Hadoop文件系统导出到关系数据库。 本课程主要讲解了Sqoop的设计思想及原理、部署安装及配置、详细具体的使用方法技巧与实操案例、企业级任务管理等。结合日常工作实践,培养解决实际问题的能力。本课程由黑马程序员提供。
相关文章
|
前端开发 JavaScript 开发者
JavaScript:构建动态网络的引擎
JavaScript:构建动态网络的引擎
|
数据采集 运维 监控
构建企业级Selenium爬虫:基于隧道代理的IP管理架构
构建企业级Selenium爬虫:基于隧道代理的IP管理架构
|
12月前
|
人工智能 监控 测试技术
告别只会写提示词:构建生产级LLM系统的完整架构图​
本文系统梳理了从提示词到生产级LLM产品的八大核心能力:提示词工程、上下文工程、微调、RAG、智能体开发、部署、优化与可观测性,助你构建可落地、可迭代的AI产品体系。
1391 52
|
12月前
|
机器学习/深度学习 人工智能 搜索推荐
从零构建短视频推荐系统:双塔算法架构解析与代码实现
短视频推荐看似“读心”,实则依赖双塔推荐系统:用户塔与物品塔分别将行为与内容编码为向量,通过相似度匹配实现精准推送。本文解析其架构原理、技术实现与工程挑战,揭秘抖音等平台如何用AI抓住你的注意力。
2920 7
从零构建短视频推荐系统:双塔算法架构解析与代码实现
|
11月前
|
Ubuntu 网络协议 网络安全
解决Ubuntu系统的网络连接问题
以上步骤通常可以帮助解决大多数Ubuntu系统的网络连接问题。如果问题仍然存在,可能需要更深入的诊断,或考虑联系网络管理员或专业技术人员。
2290 18
|
11月前
|
监控 安全 网络协议
Cisco Identity Services Engine (ISE) 3.5 发布 - 基于身份的网络访问控制和策略实施系统
Cisco Identity Services Engine (ISE) 3.5 发布 - 基于身份的网络访问控制和策略实施系统
972 1
Cisco Identity Services Engine (ISE) 3.5 发布 - 基于身份的网络访问控制和策略实施系统
|
11月前
|
机器学习/深度学习 大数据 关系型数据库
基于python大数据的青少年网络使用情况分析及预测系统
本研究基于Python大数据技术,构建青少年网络行为分析系统,旨在破解现有防沉迷模式下用户画像模糊、预警滞后等难题。通过整合多平台亿级数据,运用机器学习实现精准行为预测与实时干预,推动数字治理向“数据驱动”转型,为家庭、学校及政府提供科学决策支持,助力青少年健康上网。
|
12月前
|
机器学习/深度学习 传感器 算法
【无人车路径跟踪】基于神经网络的数据驱动迭代学习控制(ILC)算法,用于具有未知模型和重复任务的非线性单输入单输出(SISO)离散时间系统的无人车的路径跟踪(Matlab代码实现)
【无人车路径跟踪】基于神经网络的数据驱动迭代学习控制(ILC)算法,用于具有未知模型和重复任务的非线性单输入单输出(SISO)离散时间系统的无人车的路径跟踪(Matlab代码实现)
703 2
|
人工智能 监控 数据可视化
如何破解AI推理延迟难题:构建敏捷多云算力网络
本文探讨了AI企业在突破算力瓶颈后,如何构建高效、稳定的网络架构以支撑AI产品化落地。文章分析了典型AI IT架构的四个层次——流量接入层、调度决策层、推理服务层和训练算力层,并深入解析了AI架构对网络提出的三大核心挑战:跨云互联、逻辑隔离与业务识别、网络可视化与QoS控制。最终提出了一站式网络解决方案,助力AI企业实现多云调度、业务融合承载与精细化流量管理,推动AI服务高效、稳定交付。
|
消息中间件 缓存 监控
中间件架构设计与实践:构建高性能分布式系统的核心基石
摘要 本文系统探讨了中间件技术及其在分布式系统中的核心价值。作者首先定义了中间件作为连接系统组件的"神经网络",强调其在数据传输、系统稳定性和扩展性中的关键作用。随后详细分类了中间件体系,包括通信中间件(如RabbitMQ/Kafka)、数据中间件(如Redis/MyCAT)等类型。文章重点剖析了消息中间件的实现机制,通过Spring Boot代码示例展示了消息生产者的完整实现,涵盖消息ID生成、持久化、批量发送及重试机制等关键技术点。最后,作者指出中间件架构设计对系统性能的决定性影响,