mysql怎么备份工具 mysql数据( 二 )


如果备份期间数据库写入负载特别大 , 而写入ibbackup_logfile速度较慢,redo log size也不大,很可能会出现ibbackup_logfile的写入速度跟不上redo log记录生成速度,redo log 空间不够时需要覆写日志文件,那么来不及写入ibbackup_logfile的记录会丢失,导致备份失败 。
MEB 4.1对此做了优化,将redo log处理线程拆分成多线程分工合作,提高处理redo log的效率,降低了redo log覆写造成备份失败的概率,但redo log新增速度和ibbackup_logfile写入速度悬殊太大 , 问题依然会发生 。
MySQL 8.0.17支持了redo log archiving 彻底解决了此问题,备份前设置innodb_redo_log_archive_dirs,指定redo log归档目录 。MEB备份时自动开启日志归档 , 当checkpoint时会将旧记录归档到此目录 , 后续从归档文件中读取redo日志记录 , 避免了覆写可能导致的redo记录丢失 。
请点击输入图片描述
注意:innodb_redo_log_archive_dirs 不能在数据目录下 , 目录权限要求是700
特性3:Page Tracking
Page Tracking 是为优化增量备份效率,减少不必要的数据页扫描 。
增量备份当前有3种扫描模式:
page-track:利用LSN精确跟踪上次备份之后被修改页面,仅复制这些页面,效率最快 。
optimistic:扫描上次备份之后被修改的InnoDB 数据文件中,找出并拷贝修改的页面 。依赖系统时间,使用存在限制 。
full-scan:扫描所有InnoDB数据文件,找出并拷贝自上次备份之后修改的页面 , 效率最慢
1、利用page-track增量备份,需先安装备份组件
mysql INSTALL COMPONENT "";
2、在全备前开启page-track
SELECT mysqlbackup_page_track_set(true);
3、全备之后,做增量备份时指定若满足page tracking条件 , 默认会使用page-track模式 , 否则会使用full-scan模式 , 也可以指定--incremental=page-track 。
mysqlbackup --incremental-backup-dir=backup_incr --trace=3 --incremental=page-track --incremental-base=history:last_full_backup backup
incremental-base有3种选择
last_backup:基于前一次备份做增备 , 前一次备份可能是增备 , 也可能是全备 。这种方式全备之间可能会有多个增备,每次增量可能比较小,但恢复时需要逐个合并 。
last_full_backup:基于前一次全备做增备 。这种方式增备会越往后体积可能越大,但恢复时只需要合并最后一次增量备份 。
dir:基于前一次的备份目录,前一次备份可能是增备,也可能是全备 。
测试对比full-scan 和page-track,在变更页小于总体50%的情况下  , 备份效率至少能有1倍的速度提升 。
page-track 模式 磁盘读写均衡,说明读写的都是修改页面 。
请点击输入图片描述
full-scan模式 磁盘读写差别很大,说明读了很多未修改的页面 。
请点击输入图片描述
MySQL 常用备份工具流程解析 下面我们就看一下常见的备份工具mysql怎么备份工具,以及目前最流行的 Percona XtraBackup 的备份流程 。
MySQL 常见的备份工具主要分为三种:
这里先说一下 binlog 备份,它只是把 binlog 又复制了一份,并且需要在逻辑备份或者物理备份的基础上才能进行数据恢复,无法单独进行数据恢复 。
mysqldump 备份出的文件就是 sql 文件 , 其核心就是对每个表执行 select  , 然后转化成相应的 insert 语句 。mysqldump 的备份流程大致如下:
从上面可以看出在 mysqldump 备份期间,备份到某个数据库时,该数据库下的表都会处于只读状态,无法对表进行任何变更,直到该库下的表备份完毕,这对于线上环境一般是无法接受的 。若是指定了--master-data或者 --dump-slave 则会在备份开始时加全局读锁(FLUSH TABLES WITH READ LOCK),直到备份结束 。当然我们可以选一个从库进行备份,这样就不会影响线上业务 。另外使用 mysqldump 备份还有一个最大的好处,因为备份出来的是 sql 语句,所以它支持跨平台和跨版本的数据迁移或者恢复,这是物理备份无法做到的 。

推荐阅读