AI 助理
备案控制台
开发者社区 数据库 文章 正文

Centos下 Mysql同步备份

2017-11-12 1033
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
RDS MySQL Serverless 基础系列，0.5-2RCU 50GB
推荐场景：
学生管理系统数据库设计 搭建个人博客
云数据库 RDS MySQL，集群系列 2核4GB
推荐场景：
搭建个人博客
云数据库 RDS MySQL，高可用系列 2核4GB
简介：

注释：MySQL支持单向、异步复制，复制过程中一个服务器充当主服务器，而一个或多个其它服务器充当从服务器。主服务器将更新写入二进制日志文件，并维护日志文件的一个索引以跟踪日志循环。服务器在日志中读取的最后一次成功更新的位置。从服务器接收从那时起发生的任何更新，然后封锁并等待主服务器通知下一次更新。在实际项目中，两台分布于异地的主机上安装有MySQL数据库，两台服务器互为主备，客户要求当其中一台机器出现故障时，另外一台能够接管服务器上的应用，这就需要两台数据库的数据要实时保持一致，在这里使用MySQL的同步功能实现双机的同步复制。
以下是操作实例：
 

一、环境配置

1、主数据服务端：CentOS release 5.6    mysql-5.0.77-4.el5_5.4   IP：192.168.4.200

2、从数据客户端：CentOS release 5.69  mysql-server-5.0.95-5.el5_9  IP：192.168.4.244

二、在主、从数据库增加同步账号

1、在主库增加一个从库可以登录的账号

MySQL>
GRANT all privileges ON *.* TO tongbu@'192.168.4.244' IDENTIFIED BY '123456'; 
(注意：tongbu是用于同步的帐号，123456是tongbu的密码)

2、在从库增加一个主库可以登录的账号

 MySQL>
GRANT all privileges ON *.* TO tongbu@'192.168.4.200' IDENTIFIED BY '123456'; 
(注意：tongbu是用于同步的帐号，123456是tongbu的密码)

三、配置数据库参数

1、以root用户登录主库，修改主库my.cnf文件；

[root@jw01 mysql]# vim /etc/my.cnf

    [mysqld]下面增加以下的参数；

default-character-set=utf8
log-bin=MySQL-bin
relay-log=relay-bin
relay-log-index=relay-bin-index
server-id=1
master-host=192.168.4.244          #同步服务器的IP
master-user=tongbu                      #用于同步的帐号
master-password=123456           #用于同步帐号的密码
master-port=3306                         #同步服务器的端口
master-connect-retry=30                  #同步的时间间隔，单位是秒
binlog-do-db=zhubao              #需要同步的库，zhubao、HyDatabase、zentao、collect；
binlog-do-db=HyDatabase
binlog-do-db=zentao
binlog-do-db=collect
replicate-do-db=zhubao     
replicate-do-db=HyDatabase     
replicate-do-db=zentao   
replicate-do-db=collect    

2、以root用户登录从库，修改从库my.cnf文件；

[root@jw02 mysql]# vim /etc/my.cnf

    [mysqld]下面增加以下的参数；
 

default-character-set=utf8
log-bin=MySQL-bin
relay-log=relay-bin
relay-log-index=relay-bin-index
server-id=2
master-host=192.168.4.200
master-user=tongbu
master-password=123456
master-port=3306
master-connect-retry=30
binlog-do-db=zhubao
binlog-do-db=HyDatabase
binlog-do-db=zentao
binlog-do-db=collect
replicate-do-db=zhubao     
replicate-do-db=HyDatabase     
replicate-do-db=zentao     
replicate-do-db=collect
slave-net-timeout=60       #当slave从主数据库读取log数据失败
slave-skip-errors=all        #忽略错误的参数

3、手工执行数据库同步；

   在从库重启mysql

[root@jw02 mysql]# service mysqld restart
停止 mysqld：                                              [确定]
启动 mysqld：                                              [确定]

4、在从库上用root账户登录Mysql，执行；

MySQL> stop slave; 
MySQL> load data from master;
MySQL> start slave;

5、在主库重启Mysql；

[root@jw01 mysql]# service mysqld restart
停止 mysqld：                                                [确定]
启动 mysqld：                                                [确定]

6、查看数据库同步的状态；将显示同步进程的状态，如下所示，红色字体为slave进程状态，如果都为YES表示正常;如果有问题会有错误提示，为NO：

 mysql> show slave status\G;
*************************** 1. row ***************************
Slave_IO_State: Waiting for master to send event
Master_Host: 192.168.4.200
Master_User: tongbu
Master_Port: 3306
Connect_Retry: 30
Master_Log_File: MySQL-bin.000014
Read_Master_Log_Pos: 98
Relay_Log_File: relay-bin.000052
Relay_Log_Pos: 235
Relay_Master_Log_File: MySQL-bin.000014
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
Replicate_Do_DB: zhubao,HyDatabase,zentao,collect
Replicate_Ignore_DB: 
Replicate_Do_Table: 
Replicate_Ignore_Table: 
Replicate_Wild_Do_Table: 
Replicate_Wild_Ignore_Table: 
Last_Errno: 0
Last_Error: 
Skip_Counter: 0
Exec_Master_Log_Pos: 98
Relay_Log_Space: 235
Until_Condition: None
Until_Log_File: 
Until_Log_Pos: 0
Master_SSL_Allowed: No
Master_SSL_CA_File: 
Master_SSL_CA_Path: 
Master_SSL_Cert: 
Master_SSL_Cipher: 
Master_SSL_Key: 
Seconds_Behind_Master: 0
1 row in set (0.01 sec)

7、测试数据库同步；

  将主库现有的数据手工同步到从库，我利用Navicat工具同步的元数据；

 在主库192.168.4.200下Collect库下增加了一个表名为：kk_test；

  查看是否已同步；有kk_test证明已经同步成功~~
 

mysql> use collect;
Database changed
mysql> show tables;
+-----------------------+
| Tables_in_collect     |
+-----------------------+
| fw_collect_item       | 
| fw_collect_purpose    | 
| fw_collect_site       | 
| fw_collect_site_cate  | 
| fw_collect_site_city  | 
| kk_test               | 
+----------------------+
6 rows in set (0.00 sec)
 

四、主、从库同步出现问题如下：

1、查看发现Slave_IO_Running的状态是No；当slave从主数据库读取log数据失败后，等待多久重新建立连接并获取数据，在My.cnf配置文件中增加该参数，设置为60秒；

 slave-net-timeout=60

重启Mysql数据库后在测试；

2、数据库同步失效的解决

当数据同步进程失效后，首先手工检查slave主机当前备份的数据库日志文件在master主机上是否存在，在slave主机上运行；

mysql> show slave status\G; 

在master上检查当前的数据库列表；

 mysql> show master logs;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| MySQL-bin.000001 |       117 | 
| MySQL-bin.000002 |       117 | 
| MySQL-bin.000003 |       117 | 
| MySQL-bin.000004 |       117 | 
| MySQL-bin.000005 |       117 | 
| MySQL-bin.000006 |       117 | 
| MySQL-bin.000007 |       117 | 
| MySQL-bin.000008 |       117 | 
| MySQL-bin.000009 |       117 | 
| MySQL-bin.000010 |       117 | 
| MySQL-bin.000011 |       117 | 
| MySQL-bin.000012 |       826 | 
| MySQL-bin.000013 |      7062 | 
| MySQL-bin.000014 |     13900 | 
+------------------+-----------+
14 rows in set (0.00 sec)

如果slave主机上使用的的Master_Log_File对应的文件在master的日志列表中存在，在slave主机上开启从属服务器线程后可以自动同步：

MySQL> start slave;  

如果master主机上的日志文件已经不存在，则需要首先从master主机上恢复全部数据，再开启同步机制。

在slave主机上运行：

MySQL> stop slave;

在master主机上运行：

 MySQL> stop slave;

在slave主机上运行：

MySQL> load data from master; 
MySQL> reset master; 
MySQL> start slave;  

在master主机上运行：

MySQL> reset slave; 
MySQL>start slave;

注意：LOAD DATA FROM MASTER目前只在所有表使用MyISAM存储引擎的数据库上有效。

3、Slave_SQL_Running: No

进入slave服务器，运行：

 mysql> show slave status\G
 
.......
Relay_Log_File: localhost-relay-bin.000535
Relay_Log_Pos: 21795072
Relay_Master_Log_File: localhost-bin.000094
Slave_IO_Running: Yes
Slave_SQL_Running: No   #故障1
Replicate_Do_DB: 
Replicate_Ignore_DB: 
Last_Errno: 1050
                 Last_Error: Error 'Table 'diy_conf_part_dimension_meta' already exists' on query. Default database: 'zhubao'. Query: 'create table diy_conf_part_dimension_meta
(
   conf_part_dimension_meta_id smallint(6) not null,
   conf_part_dimension_id smallint(6) not null comment 'diy_conf_part_dimension.conf_part_dimension_id
            ',

   primary key (conf_part_dimension_meta_id)      #故障2
)'
       ......

故障1：解决办法一
Slave_SQL_Running: No
1.程序可能在slave上进行了写操作
2.也可能是slave机器重起后，事务回滚造成的.

一般是事务回滚造成的：
解决办法：

 
mysql> slave stop;
mysql> set GLOBAL SQL_SLAVE_SKIP_COUNTER=1;
mysql> slave start;
 
 
解决办法二
首先停掉Slave服务：slave stop
到主服务器上查看主机状态：记录File和Position对应的值 
进入master
 
 
 mysql> show master logs;
+------------------+-----------+
| Log_name | File_size |
+------------------+-----------+
| MySQL-bin.000001 | 117 | 
| MySQL-bin.000002 | 117 | 
| MySQL-bin.000003 | 117 | 
| MySQL-bin.000004 | 117 | 
| MySQL-bin.000005 | 117 | 
| MySQL-bin.000006 | 117 | 
| MySQL-bin.000007 | 117 | 
| MySQL-bin.000008 | 117 | 
| MySQL-bin.000009 | 117 | 
| MySQL-bin.000010 | 117 | 
| MySQL-bin.000011 | 117 | 
| MySQL-bin.000012 | 826 | 
| MySQL-bin.000013 | 7062 | 
| MySQL-bin.000014 | 13900 | 
+------------------+-----------+
14 rows in set (0.00 sec)
 
 
然后到slave服务器上执行手动同步：

mysql> change master to master_host='192.168.4.200',master_user='tongbu',
master_password='123456',master_log_file='MySQL-bin.0000014',master_log_pos=139000;

1 row in set (0.00 sec)

mysql> show slave status\G;
*************************** 1. row ***************************
........
Slave_IO_State: Waiting for master to send event
Master_Host: 192.168.4.200
Master_User: tongbu
Master_Port: 3306
Connect_Retry: 30
Master_Log_File: MySQL-bin.000014
Read_Master_Log_Pos: 13900
Relay_Log_File: relay-bin.000173
Relay_Log_Pos: 235
Relay_Master_Log_File: MySQL-bin.000014
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
Replicate_Do_DB: zhubao,HyDatabase,zentao,collect
..........

手动同步需要停止master的写操作！

故障2：寻找参数设定忽略错误

mysql> show variables like "%slave%"; 
+---------------------------+-------+
| Variable_name             | Value |
+---------------------------+-------+
| init_slave                |       | 
| log_slave_updates         | OFF   | 
| slave_compressed_protocol | OFF   | 
| slave_load_tmpdir         | /tmp/ | 
| slave_net_timeout         | 60    | 
| slave_skip_errors         | OFF  | 
| slave_transaction_retries | 10    | 
+---------------------------+-------+
7 rows in set (0.00 sec)

在/etc/My.cnf 配置文件增加忽略错误的参数

slave-skip-errors=all

重新启动Mysqld服务；

在查看一下：

 
 mysql>  show variables like "%slave%";
+---------------------------+-------+
| Variable_name             | Value |
+---------------------------+-------+
| init_slave                |       | 
| log_slave_updates         | OFF   | 
| slave_compressed_protocol | OFF   | 
| slave_load_tmpdir         | /tmp/ | 
| slave_net_timeout         | 60    | 
| slave_skip_errors         | ALL   | 
| slave_transaction_retries | 10    | 
+---------------------------+-------+
7 rows in set (0.00 sec)
 

4、 "Slave_IO_Running: No"MYSQL不同步;
show slave status\G;查看同步状态如下：
Slave_IO_Running: No
Slave_SQL_Running: Yes 

先stop slave 再reset slave再start slave就正常了。



本文转自 kuangling 51CTO博客，原文链接:http://blog.51cto.com/kling/1132562


文章标签：
云数据库 RDS MySQL 版
日志服务
关系型数据库
数据库
MySQL
监控
Linux
关键词：
CentOS Mysql
centos云数据库 RDS MySQL 版
云数据库 RDS MySQL 版同步
云数据库 RDS MySQL 版备份
CentOS备份
相关实践学习
如何快速连接云数据库RDS MySQL
本场景介绍如何通过阿里云数据管理服务DMS快速连接云数据库RDS MySQL，然后进行数据表的CRUD操作。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心，利用清洁计算为万物互联的新世界提供源源不断的能源动力，目前开服的区域包括中国（华北、华东、华南、香港）、新加坡、美国（美东、美西）、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程，来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品：云服务器ECS 云服务器 ECS（Elastic Compute Service）是一种弹性可伸缩的计算服务，助您降低 IT 成本，提升运维效率，使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
科技小能手
目录
相关文章
1786310562865821
|
20天前
|
关系型数据库 MySQL Shell
MySQL 备份 Shell 脚本：支持远程同步与阿里云 OSS 备份
一款自动化 MySQL 备份 Shell 脚本，支持本地存储、远程服务器同步（SSH+rsync）、阿里云 OSS 备份，并自动清理过期备份。适用于数据库管理员和开发者，帮助确保数据安全。
1786310562865821
39 0
蓝易云
|
6天前
|
关系型数据库 MySQL Linux
CentOS 7系统下详细安装MySQL 5.7的步骤：包括密码配置、字符集配置、远程连接配置
以上就是在CentOS 7系统下安装MySQL 5.7的详细步骤。希望这个指南能帮助你顺利完成安装。
蓝易云
116 26
蓝易云
|
23天前
|
存储 安全 Linux
CentOS 7.9系统备份：每日定期发送最新备份文件到另一台服务器。
注意，这个解决方案忽略了很多细节，例如错误处理和通知、备份版本控制、循环处理旧的备份文件等等。此外，你也应该尽量保持源服务器和目标服务器之间快速，稳定且安全的网络连接，并且目标服务器应该有足够的空间用于存放每天的备份文件。如果你需要更高级的备份解决方案，可能需要考虑一下使用专门的备份工具或者服务。
蓝易云
56 18
东阳马生架构
|
2月前
|
SQL 监控 关系型数据库
MySQL原理简介—12.MySQL主从同步
本文介绍了四种为MySQL搭建主从复制架构的方法：异步复制、半同步复制、GTID复制和并行复制。异步复制通过配置主库和从库实现简单的主从架构，但存在数据丢失风险；半同步复制确保日志复制到从库后再提交事务，提高了数据安全性；GTID复制简化了配置过程，增强了复制的可靠性和管理性；并行复制通过多线程技术降低主从同步延迟，保证数据一致性。此外，还讨论了如何使用工具监控主从延迟及应对策略，如强制读主库以确保即时读取最新数据。
东阳马生架构
104 4
MySQL原理简介—12.MySQL主从同步
蓝易云
|
3月前
|
安全 关系型数据库 MySQL
CentOS7仅安装部署MySQL80客户端
通过上述步骤，你可以在CentOS 7上成功安装并配置MySQL 8.0客户端。这个过程确保你能够使用MySQL客户端工具连接和管理远程的MySQL数据库，而不需要在本地安装MySQL服务器。定期更新MySQL客户端可以确保你使用的是最新的功能和安全修复。
蓝易云
385 16
蓝易云
|
4月前
|
监控 关系型数据库 MySQL
Flink CDC MySQL同步MySQL错误记录
在使用Flink CDC同步MySQL数据时，常见的错误包括连接错误、权限错误、表结构变化、数据类型不匹配、主键冲突和
蓝易云
260 17
龙大吉
|
5月前
|
关系型数据库 MySQL Linux
在 CentOS 7 中通过编译源码方式安装 MySQL 数据库的详细步骤，并与使用 RPM 包安装进行了对比
本文介绍了在 CentOS 7 中通过编译源码方式安装 MySQL 数据库的详细步骤，并与使用 RPM 包安装进行了对比。通过具体案例，读者可以了解如何准备环境、下载源码、编译安装、配置服务及登录 MySQL。编译源码安装虽然复杂，但提供了更高的定制性和灵活性，适用于需要高度定制的场景。
龙大吉
304 3
游客kufrkwrbkmpsa
|
27天前
|
关系型数据库 MySQL Java
【YashanDB知识库】原生mysql驱动配置连接崖山数据库
【YashanDB知识库】原生mysql驱动配置连接崖山数据库
游客kufrkwrbkmpsa
43 0
【YashanDB知识库】原生mysql驱动配置连接崖山数据库
蓝易云
|
1月前
|
关系型数据库 MySQL 数据库连接
docker拉取MySQL后数据库连接失败解决方案
通过以上方法，可以解决Docker中拉取MySQL镜像后数据库连接失败的常见问题。关键步骤包括确保容器正确启动、配置正确的环境变量、合理设置网络和权限，以及检查主机防火墙设置等。通过逐步排查，可以快速定位并解决连接问题，确保MySQL服务的正常使用。
蓝易云
258 82
青云交（Java大数据AI云计算Python）
|
2天前
|
SQL 关系型数据库 MySQL
大数据新视界--大数据大厂之MySQL数据库课程设计：MySQL 数据库 SQL 语句调优方法详解（2-1）
本文深入介绍 MySQL 数据库 SQL 语句调优方法。涵盖分析查询执行计划，如使用 EXPLAIN 命令及理解关键指标；优化查询语句结构，包括避免子查询、减少函数使用、合理用索引列及避免 “OR”。还介绍了索引类型知识，如 B 树索引、哈希索引等。结合与 MySQL 数据库课程设计相关文章，强调 SQL 语句调优重要性。为提升数据库性能提供实用方法，适合数据库管理员和开发人员。
青云交（Java大数据AI云计算Python）
28 11

热门文章

最新文章

  • 1
    MySQL Binlog 日志查看方法及查看内容解析
  • 2
    mysql注入-字符编码技巧
  • 3
    纯PHP+MySQL手搓高性能论坛系统！代码精简，拒绝臃肿
  • 4
    MySQL细节优化：关闭大小写敏感功能的方法。
  • 5
    大数据新视界--大数据大厂之MySQL 数据库课程设计：开启数据宇宙的传奇之旅
  • 6
    去哪面试：1Wtps高并发，MySQL 热点行 问题， 怎么解决？
  • 7
    容器技术实践：在Ubuntu上使用Docker安装MySQL的步骤。
  • 8
    在Ubuntu系统的Docker上安装MySQL的方法
  • 9
    解决MySQL自增id用尽的问题
  • 10
    在Linux环境下备份Docker中的MySQL数据并传输到其他服务器以实现数据级别的容灾
  • 1
    在CentOS系统中编译安装TinyXml2的方法
    49
  • 2
    CentOS系统中rpm包与源码包的主要区别
    57
  • 3
    CentOS 7系统下详细安装MySQL 5.7的步骤：包括密码配置、字符集配置、远程连接配置
    117
  • 4
    CentOS 7.8下使用kubeadm安装Kubernetes 1.26
    55
  • 5
    CentOS分区表损坏修复方法
    54
  • 6
    CentOS环境搭建Elasticsearch集群
    63
  • 7
    在Linux（CentOS和AWS）上安装更新的git2的方法并配置github-ssh
    46
  • 8
    在CentOS 7.9中安装sshpass教程
    48
  • 9
    Centos7升级Glibc
    125
  • 10
    CentOS 7.9系统备份：每日定期发送最新备份文件到另一台服务器。
    56

    • 相关课程

    更多
  • MySQL企业常见架构与调优经验分享
  • 云数据库MySQL版快速上手教程
  • 阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
  • MySQL实战进阶
  • 数据库及SQL/MySQL基础
  • 云数据库MySQL快速入门

    • 相关电子书

    更多
  • 搭建电商项目架构连接MySQL
  • CentOS Nginx PHP JAVA 多语言镜像使用手
  • CentOS Nginx PHP JAVA多语言镜像使用手册

    • 相关实验场景

    更多
  • 基于CentOS快速搭建LAMP环境
  • 灵活弹性的PolarDB Serverless确保数据业务持续在线
  • 云端MySQL的安装及应用
  • 体验PolarDB MySQL多主集群
  • 基于ECS+RDS的在线留言系统
  • RDS MySQL的SQL问题诊断与调优

    • 推荐镜像

    更多
  • centos
  • centos-vault
  • centos-altarch
    • 下一篇
    阿里云oss简介和使用流程