GTID跳过SQL错误的脚本

简介: 点击(此处)折叠或打开 #!/bin/bash #Author:wwa USER= PWD= ...

点击(此处)折叠或打开

  1. #!/bin/bash
  2. #Author:wwa
  3. USER=
  4. PWD=
  5. HOST=
  6. PORT=
  7. REP=
  8. REPPWD=
  9. REPH=
  10. REPP=
  11. GTID=$2
  12. GTID_START=$3
  13. GTID_END=$4
  14. GTID_PURGE(){
  15. echo "GTID_UUID:$GTID, GTID_START:$GTID_START, GTID_END=%GTID_END"
  16. mysql -u$USER -p$PWD -h$HOST -P$PORT -e "stop slave;reset slave;reset master;set global gtid_purged='$GTID:$GTID_START-$GTID_END';CHANGE MASTER TO MASTER_HOST='$REPH', MASTER_PORT=$REPP, MASTER_USER='$REP',MASTER_PASSWORD='$REPPWD', master_auto_position=1;start slave;"
  17. sleep 1
  18. mysql -u$USER -p$PWD -h$HOST -P$PORT -e "show slave status\G;"
  19. }
  20. GTID_SKIP(){
  21. mysql -u$USER -p$PWD -h$HOST -P$PORT -e "stop slave;set session gtid_next='$GTID:$GTID_START';begin;commit;set session gtid_next="AUTOMATIC";start slave;"
  22. }

  23. case "$1" in
  24. GTID_PURGE)
  25. echo "Start GTID_PURGE, transaction in $GTID between $GTID_START-$GTID_END will be skipped......"
  26. GTID_PURGE
  27. echo "GTID_PURGE success......"
  28. ;;
  29. GTID_SKIP)
  30. echo "Start GTID_SKIP, transaction $GTID:$GTID_START will be skipped......"
  31. GTID_SKIP
  32. echo "GTID_SKIP success......"
  33. ;;
  34. *)
  35. echo $"Usage: $0 {GTID_PURGE args1 args2 args3|GTID_SKIP args1 args2}"
  36. exit 1
  37. ;;
  38. esac
使用简介

GTID_PURGE() 当同步 发生大量的错误时,使用flush table with read lock锁住主库, 记录GTID的事务编号(最后那个,例如后面示例里面的142787),然后数据同步到从库,在参数中加上 UUID(空格)起始事务编号 (空格) 中止事务编号
原理:purge掉master log中,同步数据的SCN之前的事务,从同步时间点以后开始读取binlog; 这样做的好处是不用去master操作,清理binlog(手抖清理了其他东西就不好了~)

GTID_SKIP()发生少量的错误时,使用show slave status\G;找到UUID和出错的事务编号,参数中加上  UUID(空格)事务编号
原理:生成一个空事务来跳过原本出错的事务,然后继续往下同步

关于 如何判断 GTID_SKIP()需要跳过的事务编号
假设出错时,slave status是这个样子,

箭头所指的代表从主库拉去的日志中,包含哪些事务(以编号的形式);
方框所指的代表从库现在执行了哪些事务;这里的意思就是从库已经执行了编号1到编号139595的事务
如果出错了,说明139596事务出错了,这时候执行脚本里的事务编号写 上139596就行

实际使用效果如图(截图时间截晚了,事务ID对不上,不过意思表达清楚了就好~)


结语: 任何发生于数据库上的操作一定要三思而后回车,血的教训数不胜数,所以验证无误的固定操作,用脚本来实现是个不错的选择。
目录
相关文章
|
2月前
|
SQL 关系型数据库 MySQL
|
29天前
|
SQL 关系型数据库 MySQL
mysql编写sql脚本:要求表没有主键,但是想查询没有相同值的时候才进行插入
mysql编写sql脚本:要求表没有主键,但是想查询没有相同值的时候才进行插入
31 0
|
7月前
|
SQL 关系型数据库 MySQL
SQL脚本相除
【5月更文挑战第6天】
69 3
|
4月前
|
存储 SQL Go
全网最长的sql server巡检脚本分享(1000行)
全网最长的sql server巡检脚本分享(1000行)
61 1
|
4月前
|
SQL 存储 关系型数据库
bat脚本拼写SQL并写文件
【8月更文挑战第7天】bat脚本拼写SQL并写文件
48 5
|
4月前
|
SQL 存储 Go
SQL Server一键巡检脚本分享
SQL Server一键巡检脚本分享
37 0
|
4月前
|
SQL 监控 安全
在Linux中,如何检测和防止SQL注入和跨站脚本(XSS)攻击?
在Linux中,如何检测和防止SQL注入和跨站脚本(XSS)攻击?
|
5月前
|
SQL API Python
`bandit`是一个Python静态代码分析工具,专注于查找常见的安全漏洞,如SQL注入、跨站脚本(XSS)等。
`bandit`是一个Python静态代码分析工具,专注于查找常见的安全漏洞,如SQL注入、跨站脚本(XSS)等。
|
4月前
|
SQL 存储 Oracle
MySQL 项目中 SQL 脚本更新、升级方式,防止多次重复执行
MySQL 项目中 SQL 脚本更新、升级方式,防止多次重复执行
68 0
|
4月前
|
SQL 运维 Oracle
SQL Server 项目中 SQL 脚本更新、升级方式,防止多次重复执行
SQL Server 项目中 SQL 脚本更新、升级方式,防止多次重复执行
50 0