锐客网

  1. 首页 > 生活百科 > it技术 > >

mysql主从错误怎么办 mysql主从常见问题

IT技术主从

故障分析 | MySQL 从机故障重启后主从同步报错案例分析MySQL 从库所在主机故障重启后 ， sql_thread 线程报错：
通过报错信息可知 ， worker 线程在回放事务 '471c2974-f9bb-11eb-afb1-52540010fb89:88313207' 时，由于要插入的记录主键冲突报错 。
主机重启前，主从同步正常，主机重启后，主从同步由于主键冲突报错，对比了冲突主键所在行记
录在主从库是一致的，初步分析事务 '471c2974-f9bb-11eb-afb1-52540010fb89:88313207' 在主机故
障前已经在从库进行了回放，那为何事务会重复回放呢？
在开启gtid模式下，如果指定 master_auto_position=1，start slave 时，从库会把
Retrieved_Gtid_Set 和 Executed_Gtid_Set 的并集发送给主库，主库将收到的并集和自己的
gtid_executed 比较，把从库 gtid 集合里缺失的事务全都发送给从库 。
主机重启后，事务重复回放 ， 表明 Retrieved_Gtid_Set 和 Executed_Gtid_Set 的并集中有 GTID 事务
丢失，导致重复获取事务执行引发主键冲突错误 。Retrieved_Gtid_Set 和 Executed_Gtid_Set 均为内存变
量，MySQL 重启后，Retrieved_Gtid_Set 初始化为空值，从而推断出 Executed_Gtid_Set 有 GTID 事务丢
失 。
Executed_Gtid_Set 来源于 gtid_executed 变量，gtid_executed 变量持久化介质有
mysql.gtid_executed 表和 binlog，其中 mysql.gtid_executed 表是 MySQL 5.7 后引入的，在 MySQL 5.6 中，从库要使用 GTID ，必须要先设置 log_bin=on,log_slave_updates=on，因为从库执行过的 GTID 只保留在 binlog 中 。
gtid_executed 变量值陈旧，推断出 binlog 未实时持久化 ， 我们看一下参数 sync_binlog :
通过以上分析 ， 此次故障来龙去脉就清楚了：
Worker 线程报 1062 主键冲突错误 -- gtid_executed 信息陈旧 -- binlog 未实时持久化
搭建一主一从测试环境，通过 sysbench 模拟主库并发插入，从库主机暴力关机后 ， 故障复现：
既然错误原因是事务重复执行 ， 那跳过错误就好了，有如下两种方式，根据需要选取其中一种方式执行：
如果最新 binglog 丢失的 GTID 较多 ， 手工执行比较繁琐，需要不断试错 。可写一个存储过程批量执行：
待主从同步正常后，再取消参数 slave_skip_errors 设置重启 MySQL。
关于mysql 主从复制的错误项目上 MySQL 还原 SQL 备份经常会碰到一个错误如下，且通常出现在导入视图、函数、存储过程、事件等对象时，其根本原因就是因为导入时所用账号并不具有SUPER 权限 ， 所以无法创建其他账号的所属对象 。ERROR 1227 (42000) : Access denied; you need (at least one of) the SUPER privilege(s) for this operation常见场景：1. 还原 RDS 时经常出现，因为 RDS 不提供 SUPER 权限；2. 由开发库还原到项目现场 ， 账号权限等有所不同 。
处理方式：
1. 在原库中批量修改对象所有者为导入账号或修改 SQL SECURITY 为 Invoker；2. 使用 mysqldump 导出备份，然后将 SQL 文件中的对象所有者替换为导入账号 。
二、问题原因我们先来看下为啥会出现这个报错，那就得说下 MySQL 中一个很特别的权限控制机制，像视图、函数、存储过程、触发器等这些数据对象会存在一个 DEFINER 和一个 SQL SECURITY 的属性，如下所示：
--视图定义CREATE ALGORITHM = UNDEFINED DEFINER = `root`@`%` SQL SECURITY DEFINER VIEW v_test
--函数定义CREATE DEFINER=`root`@`%` FUNCTION `f_test()` RETURNS varchar(100) SQL SECURITY DEFINER
--存储过程定义CREATE DEFINER=`root`@`%` PROCEDURE `p_test`() SQL SECURITY DEFINER
--触发器定义CREATE DEFINER=`root`@`%` trigger t_test
--事件定义CREATE DEFINER=`root`@`%` EVENT `e_test`
DEFINER：对象定义者 ， 在创建对象时可以手动指定用户，不指定的话默认为当前连接用户；
SQL SECURITY：指明以谁的权限来执行该对象，有两个选项，一个为 DEFINER，一个为 INVOKER，默认情况下系统指定为 DEFINER；DEFINER：表示按定义者的权限来执行； INVOKER：表示按调用者的权限来执行 。
如果导入账号具有 SUPER 权限，即使对象的所有者账号不存在，也可以导入成功 ， 但是在查询对象时，如果对象的 SQL SECURITY 为 DEFINER，则会报账号不存在的报错 。ERROR 1449 (HY000): The user specified as a definer ('root'@'%') does not exist
三、改写内容上述这个 DEFINER 问题 ， 个人想到最简单的解决方式就是 mysqldump 导出时直接摘除掉相关属性，但是 mysqldump 本身并不提供对应参数，所以比较蛋疼 ， 无论是原库走脚本变更或是备份后修改 SQL 文件都不是非常方便，尤其是触发器的 DEFINER，只能先 DROP 再 CREATE 才可以变更 。只能看下是否可以从 mysqldump 源码中去掉 DEFINER 定义 。本次 mysqldump 改写主要有 2 个目的：1. 摘取备份中视图、函数、存储过程、触发器等对象的 DEFINER 定义；2. 尝试加上比较简单的备份进度显示（原生 mysqldump 的 verbose 参数不是非常清晰，想要实现 navicate 备份时的那种行数显示） 。
改写好处：1. 可以避免还原时遇到 DEFINER 报错相关问题；2. 根据输出信息知道备份是否正常进行，防止备份中遇到元数据锁无法获取然后一直卡住的情况 。
mysql主从复制发生误操作怎么恢复mysql主从同步常见异常及恢复方法
1. 一般的异常只需要跳过一步即可恢复
slave stop;
SET GLOBAL sql_slave_skip_counter = 1;
【mysql主从错误怎么办 mysql主从常见问题】slave start;
2.断电导致主从不能同步时 ， 通主库的最后一个bin-log日志进行恢复
在主库服务器上，mysqlbinlog mysql-bin.xxxxbinxxxx.txt
tail -n 100000binxxxx.txttail-binxxxx.txt
vim tail-binxxxx.txt 打开tail-binxxxx.txt文件找到最后一个postion值
然后在从库上，change host to 相应正确的值
slave stop;
change master to master_host='ip', master_user='username', master_password='password', master_log_file='mysql-bin.xxxx', master_log_pos=xxxx;
slave start;
show slave status\G;
3.主键冲突、表已存在等错误代码如1062,1032,1060等，可以在mysql主配置文件指定
略过此类异常并继续下条sql同步 ， 这样也可以避免很多主从同步的异常中断
[mysqld]
slave-skip-errors = 1062,1032,1060
mysql主从错误怎么办的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于mysql主从常见问题、mysql主从错误怎么办的信息别忘了在本站进行查找喔 。

    推荐阅读


    上一篇：thinkphp5接口安全，thinkphp5开发api接口

    下一篇：象棋教学视频直播软件推荐，象棋直播平台哪个好怎么挣钱