个人VPS数据备份之异地备份.我有DropBox

本文涉及的产品
云数据库 RDS MySQL,集群版 2核4GB 100GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介:

现在个人博客越来、个人网站越来越多,身边大部分人都扮演着小小站长的角色,每个人手下都有着不同配置的VPS,作为一个Linux运维人员,拥有一个VPS的小小站长,细心经营捣鼓着自己的服务器/VPS,努力而细心的“经营”着自己的这份工作与爱好。本着事事无常的态度,不可再生的数据显的尤为重要,“备份”这个名词,总会让人的内心得到一丝安全感。

备份是门大学问,根据备份方式可分逻辑备份和物理备份。
根据备份时刻可分冷备份和热备份
根据存储介质可分本地备份和异地备份,而异地备份具有容灾性

对于个人VPS的数据备份,如果只将网页数据和数据库数据打包保存在本机的一个目录下,并不能完全达到数据备份的意义。而异地备份在于备份的数据会被存放在至少3个物理节点上,已达到异地容灾性备份,而鉴于成本考虑,不可能在买一个VPS进行异地容灾备份。但这并不代表对于VPS用户做到异地备份就没有其他备份方案了。

Dropbox,一个提供同步本地文件的网络存储在线应用,它提供了丰富的API,我们可以通过API将自己VPS备份的数据立刻同步到DropBox中,而DropBox提供的免费空间最够大部分站长的备份空间需求。我们利用DropBox这样的第三方脚本,来实现同步与删除。

配置自己的Dropbox,创建一个app

1.下载DropBox脚本,到自己的VPS上

1
2
3
# wget https://raw.github.com/andreafabrizi/Dropbox-Uploader/master/dropbox_uploader.sh
# chmod +x dropbox_uploader.sh
# ./dropbox_uploader.sh

运行该脚本,根据以下提示进行DropBox的设置

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
This  is  the first time you run  this  script.
1 ) Open the following URL  in  your Browser, and log  in  using your account: https: //www2.dropbox.com/developers/apps
在浏览器中打开,https: //www2.dropbox.com/developers/apps
2 ) Click on  "Create App" , then select  "Dropbox API app"
点击 "Create App" 按钮,然后选择 "Dropbox API app"
3 ) Select  "Files and datastores"
选择 "Files and datastores" 选项
4 ) Now go on  with  the configuration, choosing the app permissions and access restrictions to your DropBox folder
现在去进行配置,选择这个app对你整个Dropbox文件夹的访问权限
5 ) Enter the  "App Name"  that you prefer (e.g. MyUploader113012919723169)
输入一个你喜欢的App名称
Now, click on the  "Create app"  button.
When your  new  App  is  successfully created, please type the
App Key, App Secret and the Permission type shown  in  the confirmation page:
# App key: xxxxxxxxxx
# App secret: xxxxxxxxx
# Permission type, App folder or Full Dropbox [a/f]: a
> App key  is  xxxxxxxxxx, App secret  is  xxxxxxxxxx and Access level  is  App Folder, it's ok? [y/n]y
> Token request... OK
Please open the following URL  in  your Browser, and allow Dropbox Uploader
to access your DropBox folder:
--> https: //www2.dropbox.com/1/oauth/authorize?oauth_token=iP0TqrmjjKcAUfwW
Press enter when done...
> Access Token request... OK
Setup completed!

1

2

3

到此为止,关于Dropbox的设置就结束了,接下来按照自己的情况编写备份同步脚本。

同步备份脚本

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
#!/bin/bash
#
# when: 2013 / 10 / 15
# who:http: //blog.coocla.org
TODAY=`date -I`                                         # 获取当前日期
BACKUP_LOG=/data/backup/backup_${TODAY}.log             # 备份日志
Expire=`date -d -7day + "%Y-%m-%d" `                      # 获取 7 天前的日期
MYSQL_USER= "root"                                        # Mysql用户
MYSQL_PASS= "rootpass"                                    # Mysql密码
MYSQL_DB=( 'blog'  'yunxiaojia' )                          # 要备份的数据库名
BACK_DIR=/data/backup                                   # 备份存放的目录
Dropbox=/${TODAY}                                       # Dropbox上创建的app存放目录,这里的根(/)是指app的根目录
WEB_DATA=/data/www/wwwroot                              # 网页文件目录
#Create Today BackupDirectory
if  [ ! -d $BACK_DIR/$TODAY ];then
     mkdir $BACK_DIR/$TODAY
fi
#Backup Mysql DB
echo  "###############################################################"  > $BACKUP_LOG
echo  "Backup Mysql DB."  >> $BACKUP_LOG
echo  "Start Time : `date +%F"  "%H:%M:%S`"  >> $BACKUP_LOG
for  db  in  ${MYSQL_DB[@]}; do
     /usr/bin/mysqldump -u$MYSQL_USER -p$MYSQL_PASS --skip-opt --add-drop-table --create-options -q -e -- set -charset --routines --single-transaction --master-data= 2  $db > ${TODAY}_${db}_full_back.sql --log-error=$BACKUP_LOG
done
tar zcf ${TODAY}_db_full_back.tar.gz *.sql
rm -f *.sql
mv ${TODAY}_db_full_back.tar.gz ${BACK_DIR}/${TODAY}/
echo  "Stop Time : `date +%F"  "%H:%M:%S`"  >> $BACKUP_LOG
#Backup Website Data
echo  "###############################################################"  >> $BACKUP_LOG
echo  "Backup Website Data."  >> $BACKUP_LOG
echo  "Start Time : `date +%F"  "%H:%M:%S`"  >> $BACKUP_LOG
cd $WEB_DATA
tar zcf ${TODAY}_web_full_back.tar.gz ./* && cd -
mv ${WEB_DATA}/${TODAY}_web_full_back.tar.gz ${BACK_DIR}/${TODAY}/
echo  "Stop Time : `date +%F"  "%H:%M:%S`"  >> $BACKUP_LOG
#Upload Dropbox
echo  "###############################################################"  >> $BACKUP_LOG
echo  "Upload backup."  >> $BACKUP_LOG
echo  "Start Time : `date +%F"  "%H:%M:%S`"  >> $BACKUP_LOG
/usr/local/sbin/dropbox_uploader.sh upload ${BACK_DIR}/${TODAY}/${TODAY}_db_full_back.tar.gz ${Dropbox}/${TODAY}_db_full_back.tar.gz >> $BACKUP_LOG
/usr/local/sbin/dropbox_uploader.sh upload ${BACK_DIR}/${TODAY}/${TODAY}_web_full_back.tar.gz ${Dropbox}/${TODAY}_web_full_back.tar.gz >> $BACKUP_LOG
echo  "Stop Time : `date +%F"  "%H:%M:%S`"  >> $BACKUP_LOG
#Delete old data
echo  "###############################################################"  >> $BACKUP_LOG
echo  "Delete expire data."  >> $BACKUP_LOG
echo  "Start Time : `date +%F"  "%H:%M:%S`"  >> $BACKUP_LOG
find ${BACK_DIR} -mtime + 3  | xargs rm -rf
/usr/local/sbin/dropbox_uploader.sh  delete  /$Expire/ >> $BACKUP_LOG
echo  "Stop Time : `date +%F"  "%H:%M:%S`"  >> $BACKUP_LOG

查看日志信息如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
###############################################################
Backup Mysql DB.
Start Time :  2013 - 10 - 15  22 : 12 : 11
Stop Time :  2013 - 10 - 15  22 : 12 : 21
###############################################################
Backup Website Data.
Start Time :  2013 - 10 - 15  22 : 12 : 21
Stop Time :  2013 - 10 - 15  22 : 12 : 27
###############################################################
Upload backup.
Start Time :  2013 - 10 - 15  22 : 12 : 27
  > Uploading  "/data/backup/2013-10-15/2013-10-15_db_full_back.tar.gz"  to  "/2013-10-15/2013-10-15_db_full_back.tar.gz" ... DONE
  > Uploading  "/data/backup/2013-10-15/2013-10-15_web_full_back.tar.gz"  to  "/2013-10-15/2013-10-15_web_full_back.tar.gz" ... DONE
Stop Time :  2013 - 10 - 15  22 : 12 : 42
###############################################################
Delete expire data.
Start Time :  2013 - 10 - 15  22 : 12 : 42
  > Deleting  "/2013-10-08" ... FAILED
Stop Time :  2013 - 10 - 15  22 : 12 : 42

然后将该脚本和dropbox_uploader.sh脚本放置于/usr/local/sbin或同一目录下,然后定义crontab计划任务:


根据日志中开始时间和结束时间,小伙伴们可以定义crontab开始的时间,由于我的内容比较少,在1分钟只能即可完成,我的crontab设置如下:

1
59  23  * * * /bin/sh /usr/local/sbin/backup.sh > /dev/ null  2 >& 1

小伙伴们也可以下载DropBox客户端安装在自己的PC上,然后进行同步,手动运行以上脚本或者等待计划任务执行后,待自动同步后,即可在windows下查看的到刚才同步上去的备份文件啦!

好了,小伙伴们快去创建自己的异地备份策略吧~


附件:同步备份脚本。。。。。 backup.sh









本文转自 向阳草米奇 51CTO博客,原文链接:http://blog.51cto.com/grass51/1309401,如需转载请自行联系原作者
相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
2天前
|
存储 SQL 运维
服务器数据恢复—Isilon存储误删除vmware虚拟机的数据恢复案例
Isilon存储使用的是分布式文件系统OneFS。在Isilon存储集群里面每个节点均为单一的OneFS文件系统,所以Isilon存储在进行横向扩展的同时不会影响数据的正常使用。Isilon存储集群所有节点提供相同的功能,节点与节点之间没有主备之分。当用户向Isilon存储集群中存储文件时,OneFS文件系统层面将文件划分为128K的片段分别存放到不同的节点中,而节点层面将128K的片段分成8K的小片段分别存放到节点的不同硬盘中。用户文件的Indoe信息、目录项及数据MAP则会分别存储在所有节点中,这样可以确保用户不管从哪个节点都可以访问到所有数据。Isilon存储在初始化时会让用户选择相应的
27 12
|
8月前
|
数据安全/隐私保护
使用 HBR 混合云备份时,对于本地数据保护,一般推荐定期做全盘映像备份。
使用 HBR 混合云备份时,对于本地数据保护,一般推荐定期做全盘映像备份。
32 0
|
存储 安全 Unix
聊聊几款文件同步备份工具,你更喜欢哪一款呢?
文件备份对企业的价值对于绝大多数人而言,电脑中的不少文件对于我们来说都非常重要,一旦丢失,损失将会难以估量。随着网络威胁的不断发展和变得越来越复杂,文件传输和托管文件传输之间的区别对于企业来说至关重要。应用先进技术管理文件传输的挑战在于区分以文档为中心的协作文件共享和自动...
1007 1
聊聊几款文件同步备份工具,你更喜欢哪一款呢?
|
数据安全/隐私保护
【数据备份】3种数据备份方式是什么?
【数据备份】3种数据备份方式是什么?
|
存储 弹性计算 运维
云上备份
本文由开发者社区社群直播视频整理而来,分享灾备技术实战。
1181 0
云上备份
|
存储 弹性计算
混合云备份服务异地备份和恢复实践
阿里混合云备份服务是一套已经商业化的原生备份服务,提供了简单易用,并且高效安全的数据保护方案。阿里混合云备份服务能够定期的对指定关键数据进行增量的扫描,并对备份的数据采用了高效的重删加压缩的算法,在为关键数据保驾护航的同时又极大的减少了备份数据的存储空间占用,有效的节省成本。
2369 0
|
数据库 数据挖掘 关系型数据库
|
容灾 Linux 数据安全/隐私保护