Centos7下利用crontab+bypy实现自动备份数据到百度网盘

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: Centos7下利用crontab+bypy实现自动备份数据到百度网盘

环境配置

环境:Centos7+python2.7.5
  • 查看系统是否有python环境 python --version 一般系统自带的是2.7
  • 更新pip python -m pip install --upgrade pip
  • 安装pip、bypy
  • 1.sudo pip3 install bypy
  • 2.sudo pip install requests
  • 3.查看安装的包 pip3 list
  • Tip:(报错参考)
  • 如果版本不支持可安装python3 (适用于CentOS/RHEL)sudo yum install python3
  • 更新Python 3的ensurepip工具 python3 -m ensurepip --upgrade

授权登录

  1. 执行bypy info
  2. 访问这个连接,进行网盘的登录授权
  3. 将授权码粘贴在你的终端上面

    Tip:授权完成后可查看相关信息,由于百度PCS API权限限制,程序只能存取百度云端/apps/bypy目录下面的文件和目录
  4. 执行bypy list可查看目录信息

使用crontab实现定时自动数据备份

创建一个shell脚本

此脚本使用bypy upload命令将/opt/backups/sql文件夹下所有文件上传至网盘中apps\bypy\的某个文件夹下

添加crontab任务
- 打开定时任务编辑器 `crontab -e`
    - 例如,要每晚的12点执行 /usr/local/bin/my_script.sh 脚本,可以添加以下行: 0 0 * * * /usr/local/bin/file.sh >> /var/log/mycron.log 2>&1
    - ` * * * * *`:表示每分钟都执行。
    - ` /usr/local/bin/file.sh:`表示要执行的命令或脚本的路径。
    - ` >> /var/log/mycron.log 2>&1:`表示将命令或脚本的输出追加到/var/log/mycron.log 文件中,并将错误输出重定向到标准输出。
  1. 查看任务 crontab -l
  2. 删除任务 crontab -r
  3. 重启crond服务 systemctl restart crond

配置时遇到的一些报错

Error 31062

检查以下是不是参数传递错误:确保传递给 bypy upload 命令的参数是正确的。检查文件路径、目录路径和文件名是否正确,确保它们存在且可访问。

mysqldump: Error: ‘Access denied; you need (at least one of) the PROCESS privilege(s) for this operation’ when trying to dump tablespaces

在centos中用root账号登录mysql mysql -uroot -p

  1. 输入密码
  2. 然后执行命令 mysql> GRANT PROCESS ON *.* TO '登录de数据库账号'@'localhost';
  3. 刷新数据库 mysql> flush privileges;
  4. 完整流程

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
Linux 测试技术 Docker
Linux系统:第十三章:centos误删文件如何恢复文件数据
Linux系统:第十三章:centos误删文件如何恢复文件数据
817 0
Linux系统:第十三章:centos误删文件如何恢复文件数据
|
弹性计算 Linux Windows
【CentOS】Linux 整系统的备份与还原
Linux 整系统的备份与还原
3819 1
【CentOS】Linux  整系统的备份与还原
|
1月前
|
存储 关系型数据库 MySQL
在CentOS 8.x上安装Percona Xtrabackup工具备份MySQL数据步骤。
以上就是在CentOS8.x上通过Perconaxtabbackup工具对Mysql进行高效率、高可靠性、无锁定影响地实现在线快速全量及增加式数据库资料保存与恢复流程。通过以上流程可以有效地将Mysql相关资料按需求完成定期或不定期地保存与灾难恢复需求。
151 10
|
6月前
|
存储 安全 Linux
CentOS 7.9系统备份:每日定期发送最新备份文件到另一台服务器。
注意,这个解决方案忽略了很多细节,例如错误处理和通知、备份版本控制、循环处理旧的备份文件等等。此外,你也应该尽量保持源服务器和目标服务器之间快速,稳定且安全的网络连接,并且目标服务器应该有足够的空间用于存放每天的备份文件。如果你需要更高级的备份解决方案,可能需要考虑一下使用专门的备份工具或者服务。
273 18
|
SQL 关系型数据库 MySQL
这篇文章带你了解:如何一次性将Centos中Mysql的数据快速导出!!!
这篇文章带你了解:如何一次性将Centos中Mysql的数据快速导出!!!
209 1
|
NoSQL Linux 网络安全
【专栏】在 RHEL 8 或者 CentOS 8 上顺利安装并运行MongoDB,以处理非结构化数据和扩展技术栈
【4月更文挑战第28天】本文档介绍了如何在RHEL或CentOS 8上安装MongoDB,包括环境准备(系统更新、依赖安装、硬件需求和sudo用户)、导入MongoDB GPG公钥、创建Yum仓库、安装MongoDB社区版,以及后续的基本配置和验证(启动服务、防火墙设置和连接验证)。通过这些步骤,用户可以顺利安装并运行MongoDB,以处理非结构化数据和扩展技术栈。
701 1
|
监控 Linux 网络安全
linux centos7 rsync+sersync实现数据实时同步
linux centos7 rsync+sersync实现数据实时同步
344 0
|
SQL 关系型数据库 MySQL
centos实现mysql定时备份(单机)
centos实现mysql定时备份(单机)
369 0
|
关系型数据库 MySQL Linux
centos7利用crontab进行mysql定时备份
centos7利用crontab进行mysql定时备份
302 0
|
消息中间件 Linux Kafka
CentOS7下使用Mondo Rescue实现系统全备份
CentOS7下使用Mondo Rescue实现系统全备份
1567 0
CentOS7下使用Mondo Rescue实现系统全备份