文章目录

• 一、MySQL日志
• • 1.1 日志的分类
  • • 1.1.1 redo 重做日志
    • 1.1.2 undo 回滚日志
    • 1.1.3 error log 错误日志
    • 1.1.4 slow query log 慢查询日志
    • 1.1.5 bin log 二进制日志
    • 1.1.6 relay log 中继日志
    • 1.1.7 general log 普通日志
    • 1.1.8 配置日志
  • 1.2 日志的查询
• 二、MySQL 完全备份与恢复
• • 2.1 数据备份的重要性
  • 2.2 造成数据丢失的原因
  • 2.3 数据库备份的分类
  • • 2.3.1 从物理和逻辑角度分
  • 2.4 数据库的备份策略
  • 2.5 MySQL 完全备份
  • • 2.5.1 物理冷备份与恢复
    • 2.5.2 专用备份工具mydump 和mysqlhotocopy
    • 2.5.3 MySQL 增量备份与恢复
    • 2.5.5 MySQL 增量恢复

一、MySQL日志 1.1 日志的分类 MySQL 的日志默认保存位置为/usr/local/mysql/data
MySQL 的日志配置文件为/etc/my.cnf，里面有个[mysqld]项。

文章图片

1.1.1 redo 重做日志
达到事务一致性（每次重启都会重做）
确保日志的持久性，防止在发生故障，脏页未写入磁盘。重启数据库会进行redo log执行重做，达到事务一致性。
1.1.2 undo 回滚日志
保证数据的原子性，记录事务发生之前的一个版本，用于回滚，innodb事务可重复读和读取以提交
1.1.3 error log 错误日志
用来记录当MySQL启动、停止或运行时发生的错误信息，默认已开启

vim /etc/my.cnflog-error=/usr/local/mysql/data/mysql_error.log

1.1.4 slow query log 慢查询日志
用来记录所有执行时间超过long_query_time秒的语句，可以找到哪些查询语句执行时间长，以便于优化，默认是关闭的

vim /etc/my.cnfslow_query_log=ON slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log long_query_time=5

1.1.5 bin log 二进制日志
用来记录所有更新了数据或者已经潜在更新了数据的语句，记录了数据的更改，可用于数据恢复，默认已开启

vim /etc/my.cnf log_bin=mysql-bin log-bin=mysql-bin

1.1.6 relay log 中继日志
用于数据库主从同步，将主库发来的bin log保存在本地，然后从库进行回放。
1.1.7 general log 普通日志
用来记录数据库的操作明细，默认是关闭的，开启后会降低数据库性能。

vim /etc/my.cnf general_log=ON general_log_file=/usr/local/mysql/data/mysql_general.log

1.1.8 配置日志

1. #修改my.cnf配置文件 #错误日志 log-error=/usr/local/mysql/data/mysql_error.log #通用查询日志 general_log=ON general_log_file=/usr/local/mysql/data/mysql_general.log #二进制日志 log-bin=mysql-bin #慢查询日志 slow_query_log=ON slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log long_query_time=5 2. #重新mysql服务 systemctl restart mysqld.service

文章图片


文章图片


文章图片

1.2 日志的查询

#查看通用查询日志是否开启 show variables like 'general%'; #查看二进制日志是否开启 show variables like 'log_bin%'; #查看慢查询日功能是否开启 show variables like '%slow%'; #查看慢查询时间设置 show variables like 'long_query_time'; #在数据库中设置开启慢查询的方法 set global slow_query_log=ON;

文章图片


文章图片


文章图片


文章图片

二、MySQL 完全备份与恢复 2.1 数据备份的重要性

1. 备份的主要目的是灾难恢复
   
2. 在生产环境中，数据的安全性至关重要
   
3. 任何数据的丢失都可能产生严重的后果
   

2.2 造成数据丢失的原因

1. 程序错误
   
2. 人为操作错误.
   
3. 运算错误
   
4. 磁盘故障
   
5. 灾难(如火灾、地震)和盗窃
   

2.3 数据库备份的分类 2.3.1 从物理和逻辑角度分
1.物理备份
对数据库操作系统的物理文件(如数据文件、日志文件等)的备份
物理备份的方法 ：
冷备份(脱机备份) :是在关闭数据库的时候进行的；
热备份(联机备份) :数据库处于运行状态，依赖于数据库的日志文件；
温备份:数据库锁定表格(不可写入但可读)的状态下进行备份操作。
2.逻辑备份
对数据库逻辑组件(如:表等数据库对象)的备份
2.4 数据库的备份策略
文章图片

1. 完全备份:每次对数据库进行完整的备份

1. 是对整个数据库、数据库结构和文件结构的备份
2. 保存的是备份完成时刻的数据库
3. 是差异备份与增量备份的基础

优点：备份与恢复操作简单方便
缺点：数据存在大量的重复、占用大量的备份空间及备份与恢复时间长
2. 差异备份:备份自从上次完全备份之后被修改过的文件
3. 增量备份:只有在上次完全备份或者增量备份后被修改的文件才会被备份

文章图片

2.5 MySQL 完全备份
文章图片

2.5.1 物理冷备份与恢复

1. 备份时数据库处于关闭状态，直接打包数据库文件
   
2. 备份速度快，恢复时也是最简单的
   

1. #关闭mysql，备份data目录 systemctl stop mysqld yum -y install xz cd /usr/local/mysql #压缩备份data目录 tar Jcvf /opt/mysql_all_$(date +%F).tar.xz data/ 2. #登录mysql，删除school库 systemctl start mysqld.service mysql -u root -p123123 3. #解压之前备份的数据库data目录，不用删除原目录，会自动替换 cd /opt ls cd /usr/local/mysql tar jxvf /opt/mysql_all_2022-04-08.tar.xz-C ./ 4. #重启服务查看被删除的库

文章图片


文章图片


文章图片


文章图片


文章图片

2.5.2 专用备份工具mydump 和mysqlhotocopy

1. mysqldump常用的逻辑备份工具
   
2. mysqlhotcopy仅拥有备份MyISAM和ARCHIVE表
   

1.完全备份一个或多个完整的库（包括其中所有的表）

#格式： mysqldump -u root -p[密码] --databases 库名1 [库名2] … > /备份路径/备份文件名.sql

mysqldump -uroot -p123456 --databases boke > /opt/mysql_bak/boke.sqlmysqldump -uroot -p123456 --databases boke school > /opt/mysql_bak/boke_school.sql

文章图片

2.完全备份 MySQL 服务器中所有的库

#格式： mysqldump -u root -p[密码] --all-databases > /备份路径/备份文件名.sqlmysqldump -uroot -p123456 --all-databases > /opt/mysql_bak/all.sql

文章图片

3.完全备份指定库中的部分表

#格式； mysqldump -u root -p[密码] 库名 [表名1] [表名2] … > /备份路径/备份文件名.sqlmysqldump -uroot -p boke xues kkk > /opt/mysql_bak/boke_xues_kkk.sql

文章图片

4.查看备份文件

cat boke_xues_kkk.sql | grep -v '^/' | grep -v '^$' | grep -v '^-'

文章图片

2.5.3 MySQL 增量备份与恢复
1.开启二进制日志功能

vim /etc/my.cnf [mysqld] log-bin=mysql-bin #指定二进制日志(binlog)的记录格式为 MIXED binlog_format = MIXED server-id = 1

文章图片

二进制日志(binlog)有3种不同的记录格式：
STATEMENT(基于SQL语句)：
每一条涉及到被修改的sql 都会记录在binlog中
缺点：日志量过大，如sleep()函数，last_insert_id()>，以及user-defined fuctions（udf）、主从复制等架构记录日志时会出现问题
ROW(基于行)：
只记录变动的记录，不记录sql的上下文环境
缺点:如果遇到update…set…where true 那么binlog的数据量会越来越大
MIXED(混合模式)，默认格式是STATEMENT
一般的语句使用statement，函数使用ROW方式存储。

#只要重启就会自动生成二进制文件 systemctl start mysqld ls -l /usr/local/mysql/data/mysql-bin.*

文章图片

2.可每天进行增量备份操作，生成新的二进制日志文件

mysqladmin -u root -p flush-logs

文章图片

3.插入新数据，以模拟数据的增加或变更

insert into kaka values (8,'fawai',50,'shanghai',4); insert into kaka values (9,'kuangtu',60,'shanghai',6);

文章图片

4.再次生成新的二进制日志文件

mysqladmin -u root -p flush-logs

文章图片

之前的步骤4的数据库操作会保存到mysql-bin.000004文件中，之后数据库数据再发生变化则保存在mysql-bin.000005文件中
5.查看二进制日志文件的内容

cp /usr/local/mysql/data/mysql-bin.000005 /opt/ mysqlbinlog --no-defaults --base64-output=decode-rows -v /opt/mysql-bin.000005 #--base64-output=decode-rows：使用64位编码机制去解码并按行读取 #-v：显示详细内容

文章图片

2.5.5 MySQL 增量恢复
1．一般恢复
将所有备份的二进制日志内容全部恢复
（一）模拟丢失更改的数据的恢复步骤：

use boke; delete from kaka where id=8; delete from kaka where id=9; mysqlbinlog --no-defaults /usr/local/mysql/data/mysql-bin.000004 | mysql -u root -p

文章图片


文章图片

【MySQL-日志、备份与恢复】
文章图片

二、模拟丢失所有数据的恢复步骤

use boke drop table kaka; mysql -uroot -p boke < /opt/boke_kaka.sqlmysqlbinlog --no-defaults /usr/local/mysql/data/mysql-bin.000007| mysql -u root -p

文章图片


文章图片


文章图片

2. 基于位置恢复

1. 数据库在某一时间点可能既有错误的操作也有正确的操作
   
2. 可以基于精准的位置跳过错误的操作
   
3. 发生错误节点之前的一个节点，上一次正确操作的位置点停止
   

insert into kaka values(8,'kuaile',80,'nanjing',6)mysqlbinlog --no-defaults --base64-output=decode-rows -v mysql-bin.0000008# at 298 #220409 11:47:21 server id 1 insert into kaka values(8,'kuaile',80,'nanjing',6)

文章图片


文章图片


文章图片

2.再插入一条数据

insert into kaka values(9,'wushu',80,'shanghai',4)

文章图片

以上插入的数据都存放在mysql-bin.00008
3.测试恢复到ID为 597 之前的数据， 不恢复“后面一条”的数据

#删除数据之前必须先刷新一下日志文件 mysqladmin -u root -p flush-logs

文章图片

对数据进行恢复

mysqlbinlog --no-defaults --stop-position='597' mysql-bin.000008 | mysql -u root -p

文章图片

4.仅恢复“最后一条”的数据，跳过“前面多条”的数据恢复
删除表中所有数据

文章图片


文章图片

3.基于时间恢复

#提前创建好库和表格后 刷新（mysqladmin -uroot -p123456 flush-logs） #然后在表格中添加两条数据 use kkk insert into kkkk values(1,18); insert into kkkk values(2,58); #退出数据库 刷新（生成mysql-bin.000008） mysqladmin -uroot -p123456 flush-logs#查看二进制日志（mysql-bin.000007） #日志中会有插入语句的时间点 mysqlbinlog --no-defaults --base64-output=decode-rows -v mysql-bin.000007 #进入数据库，删除数据 mysql -uroot -p123456 use kkk delete from kkkk; #基于时间点 恢复表格到删除第二条数据之前#进入数据库查看表格 mysqlbinlog --no-defaults --stop-datetime='2022-04-09 21:15:00' /usr/local/mysql/data/mysql-bin.000007 | mysql -uroot -p123456#基于时间点 恢复表格到删除第二条数据之后#进入数据库查看表格 mysqlbinlog --no-defaults --start-datetime='2022-04-09 21:15:00' /usr/local/mysql/data/mysql-bin.000007 | mysql -uroot -p123456

文章图片


文章图片


文章图片


文章图片


文章图片


文章图片


文章图片

推荐阅读

• 

  梦见得赦文是什么意思 梦见得赦文是啥意思
• 

  我写了个IDEA开源插件，vo2dto|我写了个IDEA开源插件，vo2dto 一键生成对象转换
• 

  被误判为时空伴随者怎么办
• 

  五岁孩子太皮不听话怎么办
• 

  银耳如何快速泡好 银耳快速泡发的方法
• 

  林内壁挂炉显示黑屏,林内壁挂炉故障14怎样解决
• 

  金属火灾是指什么
• 

  劳动仲裁逾期不裁决向法院起诉
• 

  腮红保质期有多久
• 

  人民币汇宝今日价
• 

  Java开发需要掌握哪些技术（Java程序员必备技能）
• 

  健身技巧和合理饮食
• 

  gpu通用运算新篇章深入分析
• 

  龙泉驿区第五小学校的简介
• 

  户户通接收机卡未授权怎么办
• 

  从河北回来需要做核酸检测吗
• 

  把活鱼放冰箱会死吗 把鱼放在冰箱里它会活吗
• 

  落地生根的花适合家里栽吗 植物落地生根可以在家中种植吗
• 

  打钩 Word的方框中怎么输入√号？教你快速在Word中输入对号
• 

  legrand

• MYSQL--redolog，undolog，binlog
• 数据库|太强了！这款轻量级的数据库中间件完美解决了Spring Boot 中分库分表问题
• mysql|Mysql时区显示
• MySQL|MySQL学习总结
• mysql|MySQL进阶语法
• mysql|MySQL（基础架构与存储引擎）
• 数据库|Mysql的group_concat函数长度限制
• MySQL|【MySQL】创建高性能的索引
• java|蚂蚁金服5面，总结了49个面试题，遇到的面试官都是P7级别以上