mysql数据库怎么热备 数据库热备解决方案

Mysql备份恢复方案有哪些,全备,热备该怎么做方案一:mysqldump全备份 日志增量备份
1,mysqldump备份方案:
周一凌晨3点 全备
周二到周日凌晨3点增量备份
2, 备份步骤
(1)创建备份目录 , 备份脚本存放目录
Shellmkdir /usr/mysqlbackup;
Shellchmod 755 /usr/mysqlbackup;
Shellmkdir /usr/mysqlbackup/daily;
Shellchmod 755 /usr/mysqlbackup/daily;
Shellmkdir /usr/script;
Shellchmod 777 /usr/script/*.sh
(2)启用二进制日志
如果日志没有启开,必须启用binlog , 要重启mysqld,首先,关闭mysqld,打开/etc/my.cnf , 加入以下几行:
[mysqld]
log-bin
然后重新启动mysqld,会产生hostname-bin.000001以及hostname-bin.index,前面的日志文件是记录所有对数据的更新操作 , 后面的文件是存储所有二进制文件的索引,不能轻易被删除 。
(3)全备份,增量备份 。
详细见mysqlFullBackup.sh、mysqlDailyBackup.sh脚本(请注意脚本里面的备份目录、mysql软件安装目录、压缩文件名以及用户名密码,如有不符,请修改) 。
下面是部分shell上单个手动执行的测试命令 。
Shell /usr/local/mysql/bin/mysqldump -uroot -pnYuIman25040slave201012301124 --no-create-info=FALSE --order-by-primary=FALSE --force=FALSE --no-data=https://www.04ip.com/post/FALSE --tz-utc=TRUE --flush-privileg
es=FALSE --compress=FALSE --replace=FALSE --insert-ignore=FALSE --extended-insert=TRUE --quote-names=TRUE --hex-blob=TRUE --complete-insert=FALSE --add-locks=TRUE --port=3306 --d
isable-keys=TRUE --delayed-insert=FALSE --create-options=TRUE --delete-master-logs=FALSE --comments=TRUE --default-character-set=utf8 --max_allowed_packet=1G --flush-logs=FALSE -
-dump-date=TRUE --lock-tables=TRUE --allow-keywords=FALSE --events=FALSE --single-transaction=TRUE --routines --all-databases/backup/mysql/full/mysql_20110104_195546.sql
(4)设置crontab任务,每天执行备份脚本
shell crontab –e
#每个星期日凌晨3:00执行完全备份脚本
#周一到周六凌晨3:00做增量备份
0 3 * * 1-6 /root/MySQLBackup/mysqlDailyBackup.sh /dev/null 21
(5)清除旧的备份文件 。
每天去看查看下备份磁盘空间,删除旧的备份压缩文件 。
请问mysql怎么自动备份数据库?数据库的自动备份,可以减轻维护者的工作量也便于系统恢复,对于比较重要的数据库,最好还是设置下自动备份 。
【mysql数据库怎么热备 数据库热备解决方案】工具/原料
navicat for mysql
mysql 5.5
方法/步骤
打开navicat客户端,连上mysql后,双击左边你想要备份的数据库 。点击“计划”,再点击“新建批处理作业” 。
双击上面的可用任务,它就会到下面的列表里去,代表你选择了这个任务 。
点击保存,弹出个命名对话框,给这个任务取个名字,点击“确定”
点击“设置”计划任务 。
弹出的对话框,选择“计划”,再点击“新建” 。
这里设置为从2014年1月24号起每天早上九点备份该数据库 。如果想提高备份频率、或者设置备份截止日期,请点击“高级” 。
高级选项可以把备份设置的更精细 , 比如这里设置的是在24小时内每隔2小时就备份一次 。加上前面的基本设置,任务计划就是:从2014年1月24号开始,每天九点,每隔2小时备份一次,每天的备份都持续24小时 。
最后,输入电脑密码就大功告成 。
求助?windows中mysql如何进行主从热备?MySQL Replication 较高的各个版本都支持这种主备同步,而且越来越越完善和卓越 。不管是开源还是企业版本 。估计是你没有配置好,社区有相关文档,仔细看看文档,一般都没有问题...
怎么备份数据库备份有以下几个方法
1 。冷备份
关闭数据库,复制数据文件,通常在mysql目录中的data文件夹中,以库分文件夹存放,复制对应名称的表文件即可复制 , 优点速度快 , 缺点需要停止服务
2 。热备份
1mysqldump
格式 mysqldump -u root -p pwd -c 库名xx.sql
2主从复制
通过mysql的主从服务器达到文件的即时热备
如何备份整个mysql数据库1、首先打开mysql数据库软件进入软件主界面 。
2、然后再左侧树里打开自己的的数据库 。
3、然后需要点击需要备份的数据库名 。
4、如图所示为打开数据库后界面 。
5、然后需要点击转储sql文件选项 。
6、然后需要打开选择存储文件路径并选择保存 。
7、点击保存即可在路径备份好格式为sql的数据库文件 。
MySQL 常用备份工具流程解析 下面我们就看一下常见的备份工具,以及目前最流行的 Percona XtraBackup 的备份流程 。
MySQL 常见的备份工具主要分为三种:
这里先说一下 binlog 备份,它只是把 binlog 又复制了一份,并且需要在逻辑备份或者物理备份的基础上才能进行数据恢复,无法单独进行数据恢复 。
mysqldump 备份出的文件就是 sql 文件,其核心就是对每个表执行 select,然后转化成相应的 insert 语句 。mysqldump 的备份流程大致如下:
从上面可以看出在 mysqldump 备份期间,备份到某个数据库时,该数据库下的表都会处于只读状态,无法对表进行任何变更 , 直到该库下的表备份完毕,这对于线上环境一般是无法接受的 。若是指定了--master-data或者 --dump-slave 则会在备份开始时加全局读锁(FLUSH TABLES WITH READ LOCK),直到备份结束 。当然我们可以选一个从库进行备份,这样就不会影响线上业务 。另外使用 mysqldump 备份还有一个最大的好处,因为备份出来的是 sql 语句 , 所以它支持跨平台和跨版本的数据迁移或者恢复 , 这是物理备份无法做到的 。
但是也正是因为 mysqldump 备份出来的是 sql 语句,在使用时要更加注意,否则可能会酿成大祸 。例如,使用 mysqldump 常见的问题有:
所以使用 mysqldump 时一定要了解各个选项的作用,以及确认备份出来的 sql 文件里会有什么操作,会对现有数据造成什么影响 。
Mydumper 原理与 Mysqldump 原理类似,最大的区别是引入了多线程备份,每个备份线程备份一部分表,当然并发粒度可以到行级,达到多线程备份的目的 。这里不再单独介绍 。
Percona XtraBackup 是 Percona 公司开发的一个用于 MySQL 数据库物理热备的备份工具,是基于 InnoDB 的崩溃恢复功能来实现的 。它的基本工作原理如下:
Percona XtraBackup 在进行恢复时会应用拷贝的 redo log,应用已提交的事务,回滚未提交的事物,将数据库恢复到一致性状态 。因为 Percona XtraBackup 备份出来的是物理文件,所以在使用备份出的文件进行恢复或者迁移时,不会像 mysqldump 那样会存在很多问题 。
使用 XtraBackup 备份时根据备份参数设置不同 , 对数据库的变更会造成不同程度的影响 , 具体影响会在下文分析 。
通过对比发现,XtraBackup 具有对数据库影响小,且能快速恢复的优点,在日常备份中是首?。籱ysqldump 使用相对更加灵活,但是使用是要注意对数据库原有数据的影响 。
备份策略主要有:全量备份和增量备份,再加上 binlog 备份 。
目前去哪儿网数据库备份主要采用 XtraBackup 全量备份binlog 备份 。数据库的重要级别不同,全量备份的频率不同 。备份程序主要架构如下:
说明:
Percona XtraBackup 是目前备份 MySQL 使用最广泛的工具 。在备份过程中,数据库可以进行正常的读写或者其他变更操作,但是偶尔也会遇见备份引起的元数据锁 , 或提交事务时发现被 binlog lock 阻塞等情况 。下面我们就看一下 Percona XtraBackup 的备份流程和加锁时机 。
说明:以下对 Percona XtraBackup 的分析都是基于 2.4.23 的版本 , 其他版本会略有差别,但是关键步骤基本相同 。
XtraBackup 在备份开始时,会创建一个后台线程,专门用于拷贝数据库的 redo log。首先 XtraBackup 会扫描每组 redo log 的头部 , 找出当前的 checkpoint lsn,然后从该 lsn 后顺序拷贝所有的 redo log,包括后续新产生的 redo log。该线程会一直持续到将非事务表完全拷贝完成,才会安全退出 。备份日志输出中会记录拷贝开始时的 checkpoint lsn。日志输出如下:
在拷贝ibd文件之前,会先扫描数据库的数据文件目录,获取ibdata1 , undo tablespaces及所有的ibd文件列表,并会记录相应的 space id,因为在恢复时需要这些 space id来找到对应 doublewrite buffer里页面的内容,以及对应的redo log条目 。然后开始循环拷贝ibdata1,undo tablespaces及所有的ibd文件 。
这里可通过设置--parallel进行多线程备份,提高物理文件的拷贝效率 。不设置则默认为1 。
在所有ibd文件拷贝完成后,XtraBackup开始备份非ibd文件 。这一部分的逻辑比较复杂,因为备份非ibd文件前需要加锁,具体是否会加锁主要受到--no-lock 参数设置的影响 。
若是设置了--no-lock为TRUE,则不会使用"FLUSH TABLES WITH READ LOCK"去加全局读锁 , 但是若备份过程中对non-InnoDB表执行了DDL或者DML操作,这会导致备份的不一致,恢复出来的数据就会有问题 。所以是不建议将--no-lock为TRUE,默认值是FALSE,也就是在不指定该选项的情况下会在备份非ibd文件前加全局读锁 。
下面我们结合源码来看看判断是否加全局锁这部分的具体流程逻辑:
流程图如下:
总结来看:
1)若--no-lock为FALSE(默认值),则先施加全局读锁 , 然后再进行拷贝文件,另外若 --safe-slave-backup 设置为TRUE,则会在加全局锁之前关闭SQL_THREAD线程;
2)若--no-lock为TRUE , 则不会施加锁,直接进行拷贝文件 。
加锁的逻辑主要由lock_tables_maybe实现,先看一下lock_tables_maybe源代码,如下:
lock_tables_maybe 函数简化处理流程如下:
1)若备份实例上已经加锁( LOCK TABLES FOR BACKUP / FLUSH TABLES WITH READ LOCK)或者设置lock-ddl-per-table 则直接返回;
2)若支持备份锁,则执行LOCK TABLES FOR BACKUP;
3)若不支持备份锁,则执行 FLUSH TABLES WITH READ LOCK 。根据相应选项设置,在执行该操作前会判断是否有执行中的DDL/DML , 以及等待超时时间,是否kill 对应的未结束的事务等 。
从上文中我们还看到一个参数--safe-slave-backup , 该参数的主要作用是:
若是在从库执行的备份操作时设置了该参数,可以防止因从库同步主库操作,而导致XtraBackup长时间请求不到锁而造成备份失败 。
若是设置了 --safe-slave-backup 为TRUE,那么会执行"STOP SLAVE SQL_THREAD",并等待Slave_open_temp_tables 为零才开始拷贝非 ibd 文件 , Slave_open_temp_tables 为零说明SQL thread执行的事务都已经完成,这样就能保证备份的一致性 。并且此时也不会有在执行的事务阻塞 XtraBackup 施加全局锁 。
备份完非 ibd 文件后,将会备份 slave 和 binlog 信息 。
mysql-bin.000004 2004 6b7bda9f-15f0-11ec-ba14-fa163ea367a4:1-83,9841546e-15f0-11ec-9557-fa163e736db4:1
需要注意,在支持备份锁的实例上备份,指定了 --slave-info 或--binlog-info 均会先施加 binlog 备份锁( LOCK BINLOG FOR BACKUP),这会阻塞任何会更改 binlog 位点的操作 。
备份完数据库的所有文件和binlog等相关信息 , 备份工作就基本完成了,之后主要执行的操作如下:
1)执行"FLUSH NO_WRITE_TO_BINLOG ENGINE LOGS",将所有的redo log刷盘;
2)停止redo log复制线程;
3)释放全局读锁(备份锁),binlog锁;
4)开启SQL_THREAD;
5)拷贝ib_buffer_pool和ib_lru_dump文件;
6)生成配置文件backup-my.cnf;
7)打印备份信息到xtrabackup_info文件 , 这些信息主要包含备份时使用的参数信息,备份起止时间 , binlog位点信息,以及将会回到的lsn点 。
下面是xtrabackup_info记录的部分内容:
加锁对应的函数是 mdl_lock_tables ,释放锁对应的函数是 mdl_unlock_all,主要是执行COMMIT,结束 mdl_lock_tables 中开启的显式事务,来释放MDL锁 。mdl_lock_tables 流程如下:
上面参数--lock-ddl和--lock-ddl-per-table是在 Percona XtraBackup 2.4.8 之后添加的,因为 MySQL 5.7 新增了一个叫做 Sorted Index Builds 的功能 , 这会导致某些 DDL 操作不记录重做日志而导致备份失败 。使用--lock-ddl或--lock-ddl-per-table 就会在备份开始时施加锁,阻止 DDL 操作 。
另外,若备份时指定了--lock-ddl或--lock-ddl-per-table,则在备份非 ibd 文件时就不是再有加锁操作 。
注意:LOCK TABLES FOR BACKUP和LOCK BINLOG FOR BACKUP 语句只有在支持备份锁的实例上才会执行,Percona Server for MySQL已经在 5.6.16-64.0 版本开始支持这种更加轻量的备份锁 。
Q1: 使用 XtraBackup 备份的文件进行恢复时,恢复到哪个时间点?A1:恢复到执行 LOCK BINLOG FOR BACKUP 或 FLUSH TABLES WITH READ LOCK 的时间点,因为这时任何改变 binlog 位点的操作都会被阻塞,redo log和binlog 是一致的 。
Q2: 在开启 binlog 的情况下 , MySQL 的奔溃恢复是同时依赖 binlog 和 redo log 这两种日志的,为什么XtraBackup 不用备份binlog?
A2:因为在备份中有执行LOCK BINLOG FOR BACKUP/FLUSH TABLES WITH READ LOCK , 阻止了任何改变binlog位点的操作,这样只需要根据redo log将有commit log 的事务提交 , 没有commit log的事务进行回滚即可 。
Q3: 使用Percona XtraBackup备份完成后redo的位点是和binlog是一样还是比binlog多一些?
A3:通过分析备份流程可以发现备份 binlog 位点信息(加binlog锁)是发生在停止 redo 拷贝线程前 , 而释放锁是在停止 redo 拷贝线之后,所以 redo log 会多一些 。锁住了 binlog 保证了在该 binlog 位点前已经提交的事务的 redo log 都有 commit log 的信息,未提交的事物也就没有对应的 commit log 的信息 , 即便在锁住 binlog 后有 Innodb 表新的 DML 产生的 redo log ,但是事务无法提交 , 也就没有 commit log 的信息的,最后在回放的过程中对没有 commit log 的事务进行回滚就可以了 。
Q4:Percona XtraBackup什么时候会加锁,以及影响加锁时间长度的因素有哪些?
A4:上面进行了分析,加锁操作只在备份非 ibd 文件时执行 , 加锁时长主要和非事务表的数量和大小有关 , 非事务表的数量越多 , 体积越大,拷贝文件所用的时间越长,那么加锁时间也就越长 。也会和 redo log 生成的速度有关,只是 redo log 刷盘受到多个因素的影响,未及时刷盘的 redo log 一般很小 。
Q5:Percona XtraBackup 和mysqldump选择哪个更好?
A5:通过上面的的解析,若是整个实例备份 , 首先选择 Percona XtraBackup,因为对数据库的影响最小 。若只是备份某个库表,这个就要视数据量而定,若数据量不大可以使用 mysqldump。注意,对数据库做备份时最好选择业务连接最少的从库,因为备份也会消耗一定的资源,避免影响业务 。
mysql数据库怎么热备的介绍就聊到这里吧,感谢你花时间阅读本站内容,更多关于数据库热备解决方案、mysql数据库怎么热备的信息别忘了在本站进行查找喔 。

    推荐阅读