Linux下数据备份的一般方法

本文涉及的产品
RDS AI 助手,专业版
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
简介: 一个应用中有很多的重要数据,为了在数据灾难发生后我们能够及时、迅速、准确的恢复我们的应用到一个比较合适的位置,我们必须定期的对我们的数据资料进行备份,今天所要讨论的就是Linux下数据资料备份的方法。1、本机数据手工备份    Linux上有功能强大的tar命令,tar最初是为了制作磁带备份而设计的,他的作用是把文件和目录备份到磁带中,然后从磁带中提取或恢复文件。
一个应用中有很多的重要数据,为了在数据灾难发生后我们能够及时、迅速、准确的恢复我们的应用到一个比较合适的位置,我们必须定期的对我们的数据资料进行备份,今天所要讨论的就是Linux下数据资料备份的方法。

1、本机数据手工备份
    Linux上有功能强大的tar命令,tar最初是为了制作磁带备份而设计的,他的作用是把文件和目录备份到磁带中,然后从磁带中提取或恢复文件。现在我们可以使用tar来备份数据到任何存储介质上。
    tar命令备份数据的格式如下:
        tar cvf backup.tar /home/www    这个命令的含义就是将 /home/www/ 打包为 backup.tar 文件,如果我们需要压缩,则需要加上 z 命令。
    使用这个命令,我们可以手工备份服务器上的数据,但是要做到定时自动备份,我们还需要借助下一个技巧。

2、本机数据自动备份
    要实现自动备份,我们首先需要将 tar 命令写在脚本里。比如下面这样一个脚本:
        #!/bin/sh
        
        tar zcvf test.tar /home/www/
    保存为 test.sh 并添加可执行权限,执行后,发现提示:tar: Removing leading `/' from member names
    这个问题是由于脚本执行的时候默认是在用户目录下的。这样就选成了问题的存在,解决办法就是在执行 tar 之前 cd 切换到要打包的目录就可以了。
    
    有了可以执行命令的脚本,还要能够让他定时执行,这个就要借助于计划任务了。
    
    Linux 为我们提供了 cron 这个强大的工具,我们可以用它来实现几乎任何类型的定时触发。每个用户都有自己的 cron 配置文件,一般来说,我们都是通过 root 用户来运行 cron 任务,以保证我们能够获得足够的权限。
    如果我们希望每天凌晨四点定时运行我们之前写好的脚本,我们可以通过 crontab -e 来编辑配置文件,并加入:
        0 4 * * * /home/test.sh
    这样,每天凌晨4点系统会自动运行这个备份脚本。

    下面是一个自动备份的脚本的例子:

# !/bin/sh

# aim to backup the resorces files and mysql data that used by shenti system
# crontab run at 4:00AM every day
# procedure: first backup all the data, then check if 3 days ago backup files exist, then delete prior
# created by shiqiang at 2009-10-28


BACKDIR
= " /home/backup/ "
LOGFILE
= " /home/backup/shenti_backup_log "
MYSQLBIN
= " /etc/init.d/mysql "

RESOURCEPATH
= " /home/ "      #  add the path var to avoid the 'Removing leading / from member names tips'
RESOURCEDIR = " www/ "

MYSQLDATAPATH
= " /var/lib/mysql/ "
MYSQLDATADIR_1
= " wys/ "
MYSQLDATADIR_2
= " wys2/ "

#  cd $BACKDIR

YEAR
= `date  + %Y `
MONTH
= `date  + %m `
DAY
= `date  + %d `

echo 
" ----------------------------------- "   >>   $LOGFILE
echo $(date 
+ " %Y-%m-%d %H:%M:%S " ) "  Shenti backup begin "   >>   $LOGFILE

DIRNAME
= $BACKDIR$YEAR - $MONTH - $DAY
FILENAME
= $DIRNAME / $YEAR - $MONTH - $DAY - shenti - resorces - backup . tar

#  change dir to correspond folder
if  [  !   - $DIRNAME  ]
then
    
mkdir   $DIRNAME
fi

#  backup the resources folder
cd  $RESOURCEPATH
tar zcvf 
$FILENAME   $RESOURCEDIR   >>   $LOGFILE   2 >& 1

#  backup the mysql data folder, we should be attion about the data consistency

$MYSQLBIN  stop  >>   $LOGFILE   2 >& 1

cd 
$MYSQLDATAPATH
FILENAME
= $DIRNAME / $YEAR - $MONTH - $DAY - mysqldata - wys - backup . tar
tar zcvf 
$FILENAME   $MYSQLDATADIR_1   >>   $LOGFILE   2 >& 1

FILENAME
= $DIRNAME / $YEAR - $MONTH - $DAY - mysqldata - wys2 - backup . tar
tar zcvf 
$FILENAME   $MYSQLDATADIR_2   >>   $LOGFILE   2 >& 1

$MYSQLBIN  start  >>   $LOGFILE   2 >& 1

echo 
" Resources and mysql data backup finished at " $(date  + " %Y-%m-%d %H:%M:%S " >>   $LOGFILE

#  check the old backup folder
OLDBACKDIR = " $BACKDIR " $(date  + %Y - %m - %d   -- date = ' 3 days ago ' )

if  [  - $OLDBACKDIR  ]
then
         `rm 
- rf  $OLDBACKDIR >>   $LOGFILE   2 >& 1
    echo 
"  [$OLDBACKDIR] Delete Old Backup Folder Success! "   >>   $LOGFILE
else
         echo 
" No Old backup folders $OLDBACKDIR  ! "   >>   $LOGFILE
fi

echo 
" Shenti Backup finished at  " $(date  + " %Y-%m-%d %H:%M:%S " >>   $LOGFILE

cd 
$BACKDIR

 

3、双机数据自动备份
    从安全性上考虑来讲,将备份文件存放在宿主机器上本事是不安全的,真的在灾难性情况下,这种备份时很脆弱的,所以我们需要将数据备份到另外的一台服务器上。但是,我们这里实现的双机定时的备份,而不是实时的备份。因为实时备份(热备)对于技术的要求很高,属于商业应用级的。
    
    双机备份,我们可以现在本机上备份文件,在将备份的文件传输到其他机器上。但是这个方法并不好,实际中也不会这么去做。
    查看一些资料,有的说可以通过 Mirror 来实现双机的备份[1],但是这个还需要借助第三方的软件,我觉得并是很好的办法,因为 linux 中同时还有一个强大的工具 scp 。
    同时,我们也可以考虑使用 rsync 来同步两个服务器之间的数据,关于 rsync 的使用,在本博中曾经有过一篇做了介绍,这里就不再多说了,希望大家能够找到适合自己的数据备份方案。

参考资料:
1、 Linux下数据的备份方法           
2、 一个Mysql自动备份脚本          
3、 验证命令是否成功执行           
4、 Mysql备份和恢复策略           
5、 tar在脚本中使用的错误信息       
6、 计划任务CRON的配置和说明       
相关实践学习
自建数据库迁移到云数据库
本场景将引导您将网站的自建数据库平滑迁移至云数据库RDS。通过使用RDS,您可以获得稳定、可靠和安全的企业级数据库服务,可以更加专注于发展核心业务,无需过多担心数据库的管理和维护。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
8月前
|
Ubuntu 物联网 Linux
从零安装一个Linux操作系统几种方法,以Ubuntu18.04为例
一切就绪后,我们就可以安装操作系统了。当系统通过优盘引导起来之后,我们就可以看到跟虚拟机中一样的安装向导了。之后,大家按照虚拟机中的顺序安装即可。 好了,今天主要介绍了Ubuntu Server版操作系统的安装过程,关于如何使用该操作系统,及操作系统更深层的原理,还请关注本号及相关圈子。
|
8月前
|
缓存 监控 Linux
Linux系统清理缓存(buff/cache)的有效方法。
总结而言,在大多数情形下你不必担心Linux中buffer与cache占用过多内存在影响到其他程序运行;因为当程序请求更多内存在没有足够可用资源时,Linux会自行调整其占有量。只有当你明确知道当前环境与需求并希望立即回收这部分资源给即将运行重负载任务之前才考虑上述方法去主动干预。
2140 10
|
8月前
|
Ubuntu Linux 图形学
推广与体验Ubuntu Linux的便捷方法
如果你的朋友或家人对尝试Linux感兴趣,但希望在安装之前先体验一下,你可以分享以下链接给他们:Ubuntu在线导览。通过这个链接,他们可以在任何地方轻松体验Ubuntu,无需安装即可深入了解这个流行的操作系统。
|
8月前
|
XML 缓存 Linux
在Linux环境下解决Visual Studio Code字体显示异常和字体替换方法。
解决Linux下VS Code字体显示异常,需要对Linux字体渲染机制有所理解,并对VS Code的配置选项进行合理设置。替换字体时则要通过系统字体配置或VS Code设置来完成。通过上述方法,可以有效地解决字体显示问题,从而提升代码编辑的视觉体验。
1178 0
|
11月前
|
NoSQL Linux 编译器
GDB符号表概念和在Linux下获取符号表的方法
通过掌握这些关于GDB符号表的知识,你可以更好地管理和理解你的程序,希望这些知识可以帮助你更有效地进行调试工作。
466 16
|
12月前
|
关系型数据库 MySQL Linux
在Linux环境下备份Docker中的MySQL数据并传输到其他服务器以实现数据级别的容灾
以上就是在Linux环境下备份Docker中的MySQL数据并传输到其他服务器以实现数据级别的容灾的步骤。这个过程就像是一场接力赛,数据从MySQL数据库中接力棒一样传递到备份文件,再从备份文件传递到其他服务器,最后再传递回MySQL数据库。这样,即使在灾难发生时,我们也可以快速恢复数据,保证业务的正常运行。
516 28
|
9月前
|
网络协议 Ubuntu Linux
Wireguard in Linux的安装方法
本文介绍了如何在Ubuntu和Rocky Linux中安装配置WireGuard,并探讨了配置过程中可能出现的DNS泄露问题及解决方法,包括通过nmtui设置DNS及调整DNS优先级参数。
|
12月前
|
Linux Shell
Linux系统下快速批量创建和删除文件的方法
总的来说,使用shell脚本来批量处理文件是一种非常强大的工具,只要你愿意花时间学习和实践,你会发现它能大大提高你的工作效率。
620 19
|
12月前
|
Ubuntu Linux 网络安全
如何在Linux中更改主机名?修改主机名最新方法
本期教程将指导您如何在Linux系统中更改主机名。主机名是Linux系统的常用功能,用于识别服务器,帮助区分不同服务器,并与网络进程和其他应用程序协同工作。教程涵盖显示当前主机名的方法(通过`hostname`命令),以及在CentOS 7、Debian 9和Ubuntu 16.04及以上版本中更改主机名的步骤(使用`hostnamectl set-hostname`命令)。对于其他Linux版本,可编辑`/etc/hostname`文件实现更改。记得重启相关服务或服务器以使更改生效!
2769 12