oneproxy检测主从复制同步延迟

简介:

Q:为什么要实现读写分离延迟检测?


A:就好比你在ATM机存钱,你老婆收到短信后乐呵呵的拿网银APP查看,结果钱没过来。其实钱已经到账了,只是查询的ATM机节点钱还没过来。所以我们dba要监控数据,一旦发现钱没有复制到另一ATM机节点,会强制你从存钱的那个ATM机节点去查看。


读写分离可以通过php yii框架、java mybatis框架实现,但主从复制的延迟检测一直是重难点,OneProxy内部支持主从复制延迟检测的功能,主要通过如下两种方式进行实现。


  1. 通过检测从库的Seconds_Behind_Master参数的值来实现。这也是OneProxy检测主从同步复制延迟的默认方式,在后台中可以看到延迟的Seconds,超过设定的延迟时间,OneProxy会停止向延迟从库分发流量(已经过测试)。

wKiom1WKIA-TBqYUAAVYSnWZB6s732.jpg


2.OneProxy自己建立一张table,每秒进行update,来检测同步复制延迟,很像Percona的pt-heartbeat工作 原理(pt-heartbeat通过真实的复制数据来确认mysql复制延迟,这个避免了对复制机制的依赖,从而能得出准确的落后复制时间,包含两部分: 第一部分在主上pt-heartbeat的–update线程会在指定的时间间隔更新一个时间戳,第二部分是pt-heartbeat的–monitor 线程或者–check线程连接到从上检查复制的心跳记录(前面更新的时间戳),并和当前系统时间进行比较,得出时间的差异。) 超过设定的延迟时间,OneProxy会停止向延迟从库分发流量(已经过测试)。

表名:oneproxy_replication_check

wKioL1WKIfHQO3ObAALoorb4oz4400.jpg


可以通过控制SQL,加上/* master */来强制走主库,例如涉及到金额的查询。


注:采用中间件的好处是前段代码改动小。


如下图所示:

wKiom1WKIKDhuCBBAALSjuEmfIs785.jpg















本文转自hcymysql51CTO博客,原文链接: http://blog.51cto.com/hcymysql/1664963,如需转载请自行联系原作者


相关文章
|
2月前
|
SQL 关系型数据库 MySQL
解决MySQL主从慢同步问题的常见的解决方案:
解决MySQL主从慢同步问题的方法有很多,以下是一些常见的解决方案: 1. 检查网络连接:确保主从服务器之间的网络连接稳定,避免网络延迟或丢包导致数据同步缓慢。 2. 优化数据库配置:调整MySQL的配置参数,如增大binlog文件大小、调整innodb_flush_log_at_trx_commit等参数,以提高主从同步性能。 3. 检查IO线程和SQL线程状态:通过SHOW SLAVE STATUS命令检查IO线程和SQL线程的状态,确保它们正常运行并没有出现错误。 4. 检查主从日志位置:确认主从服务器的binlog文件和位置是否正确,避免由于错误的日志位置导致同步延迟。 5.
167 1
|
5月前
|
SQL 存储 关系型数据库
MySQL主从同步延迟原因与解决方案
MySQL主从同步延迟原因与解决方案
222 0
MySQL主从同步延迟原因与解决方案
|
7月前
|
SQL 关系型数据库 MySQL
MySQL主从同步原理
MySQL主从同步原理
|
SQL 数据采集 算法
Mysql主从同步及主从同步延迟解决方案
Mysql主从同步及主从同步延迟解决方案
491 0
Mysql主从同步及主从同步延迟解决方案
|
关系型数据库 MySQL
MySQL主从延时这么长,要怎么优化?
MySQL主从复制,读写分离是互联网常见的数据库架构,该架构最令人诟病的地方就是,在数据量较大并发量较大的场景下,主从延时会比较严重。
1027 0
|
SQL 监控 关系型数据库
mysql主从复制(半同步方式)
mysql主从复制(半同步方式) 博客分类: MySQL mysql replication 复制  一、半同步复制原理介绍 1. 优点 当事务返回客户端成功后,则日志一定在至少两台主机上存在。
3221 0
|
关系型数据库 MySQL 数据库