尝试用binlog恢复mysql数据

Binlog介绍:

  • Binlog又称归档日志是专门用来记录逻辑的 (监控并记录你在干啥,比如有没有偷偷删表删库??)
  • Binlog位于server层,因此所有的存储引擎都可以使用
  • Binlog没有固定大小,会追加写入且不会覆盖旧的Binlog

Binlog开启和配置:

首先我们要检查下我们是否开启了Binlog
输入命令:

show variables like '%bin%';

《尝试用binlog恢复mysql数据》

1,变量log_bin 为 on表示已开启 (如何开启? 直接my.cnf添加log_bin="log_bin_basername"即可)

2,变量log_bin_basename 为 binlog日志的文件名,还会自动接后缀.00000xx,每次重启mysql服务或者使用flush logs命令都会生成一个新的binlog文件

3,变量bin_format则表示日志记录的格式,共有三种格式,分别是statement,rows,mixed,

  • statement 记录的是sql语句
  • rows 记录的是对数据操作的上下文
  • mixed 则兼容statementrows,会自动根据场景来选择使用前两者的哪一种

一般我们推荐使用mixed,因为statement存在隔离限制,如果在”rc/ru” 即 读未提交/读提交的隔离级别下,会产生不可重复读,配置主从后使用statement格式(因为只是记录sql)进行复制会导致主从数据不一致,而 rows 由于记录的行数据操作的上下文,相比statement占用空间更大

接着我们先查看一下当前的isolation

输入命令:
show variables like '%isolation%';

《尝试用binlog恢复mysql数据》

 ps:5.7+变量名变为`tracsaction_isolation`,我这边是5.6版本的所以还是`tx_isolation`

通过图可以看到,我这边隔离级别为rc,也就是读提交

对照上面讲的,rc 不支持 statement 格式,所以我们要切换格式为rows或者mixed

可以直接通过global 变量更改,或者直接修改my.cnf,我这里直接修改my.cnf

《尝试用binlog恢复mysql数据》

保存,重启服务,然后重新查看变量binlog_format,ok,已变更为mixed

《尝试用binlog恢复mysql数据》

建立测试数据并备份

建立一个test库,然后在test库中建立一个简单的t1表用以测试

CREATE TABLE `t1` (
  `id` int(3) NOT NULL AUTO_INCREMENT,
  `num` int(4) DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8

然后往t1表插入三条数据

insert into t1  (num) values(1),(2),(3);

《尝试用binlog恢复mysql数据》

这样我们测试表和备份数据就完成了,然后用mysqldump进行备份

mysqldump -u -h -p database > /dirs/xxx.sql

《尝试用binlog恢复mysql数据》

接着再插入3条新数据用以测试数据恢复,由于备份中不存在这三条,所以这三条是需要恢复的数据

insert into t1  (num) values(4),(5),(6);

《尝试用binlog恢复mysql数据》

然后我们假装误删表。。。。

drop table t1

准备阶段到此结束~~~

开始恢复数据:

ok,现在开始进入场景,由于我误删了t1表,所以我需要恢复数据(t1应当数据有6条),但备份的数据中只有3条,所以后面插入的那3条记录遗失了,但由于我们配置了binlog,所以后面那3条的数据日志是有被记录的,因此我们只需要用Binlog来恢复那三条数据即可,下面开始数据恢复。

1,先使用备份恢复

我们先把数据恢复到备份状态

mysql -uroot -p -h127.0.0.1 test < /data/mysql/test_backup.sql

《尝试用binlog恢复mysql数据》

恢复成功,检查表中数据

《尝试用binlog恢复mysql数据》

ok,已经恢复到备份状态啦

2,使用Binlog恢复

先查询下当前使用的binlog是哪个文件

show master status;

《尝试用binlog恢复mysql数据》

可以看到使用的是binlog.000001文件,position累计计数到1615

接着我们先熟悉下mysqlbinlog的筛选规则

mysqlbinlog --help

《尝试用binlog恢复mysql数据》

如图,我们可以看到mysqlbinlog 命令有4个筛选条件:

start-datetime/stop-datetime 分别表示想要筛选的记录区间的`起始时间`和`截止时间`
start-position/stop-position 则表示想要筛选的记录区间的`起始位置`和`截止位置`

我们需要用这几个筛选条件来定位所需要恢复的日志区间

然后我们来瞅一下这个binlog.000001文件

/*-d参数表示筛选的数据库名称*/
mysqlbinlog -d test /data/mysql/binlog.000001

《尝试用binlog恢复mysql数据》

由于我们使用的隔离限制为rc,mixed会自动选择rows格式记录对行的数据操作,所以看不到对应的sql,只能看到对应的上下文

But whatever 直接向下拉,然后我们找到一个重点!

《尝试用binlog恢复mysql数据》

position 699 有一个drop table t1 的操作, 而后面的position 814 和 poistion 939则是恢复备份时的删表建表操作。

因此我们确定了stop-position 就是699

然后我们在找下备份时间,因为我们不好确定start-position,而不指定开始位置全部恢复又有点太说不过去了。。因此直接查看下备份时间。

《尝试用binlog恢复mysql数据》

ok,这样我们的start-datetime也确定了, 有了 start-datetimestop-position,我们就能确定所要恢复的日志区间了

接下来就要用mysqlbinlog 命令开始恢复了

/*这里的 -D 参数表示防止出现新的日志记录,我不想把恢复时添加的数据记录也加到binlog里面*/
mysqlbinlog -d test -D --start-datetime="2019-05-25 09:39:00" --start-position=699 /data/mysql/binlog.000001 | mysql -uroot -p -h127.0.0.1 test

《尝试用binlog恢复mysql数据》

可以看到加了 -D 参数 `position`数目没有发生改变,即没有生成新的日志记录

《尝试用binlog恢复mysql数据》

查询t1表, 发现已经恢复成功了,id 567都恢复进来了

恢复结束

上面的操作是直接通过mysqlbinlog 导入到库中的,当然你也可以选择用mysqlbinlog生成sql文件,然后再导入sql文件进行恢复,我们再试一下。

《尝试用binlog恢复mysql数据》

先恢复到备份状态(因为-D 参数没有生成新的记录,所以直接start-position = 699即可)

《尝试用binlog恢复mysql数据》

然后用mysqlbinlog 生成sql

/*没有加-D 参数就是为了测试会不会出现新的日志记录*/
mysqlbinlog -d test --start-datetime="2019-05-25 09:39:00" --stop-position=699 /data/mysql/binlog.000001 > binlog_201905025.sql

《尝试用binlog恢复mysql数据》

生成成功,接着导入sql

mysql -uroot -p -h127.0.0.1 test < /data/mysql/binlog_20190525.sql

《尝试用binlog恢复mysql数据》

ok,发现恢复也成功了

《尝试用binlog恢复mysql数据》

然后查看position个数

show master status;

《尝试用binlog恢复mysql数据》

果然position变多啦~

  一般建议恢复时添加-D 参数,因为恢复时记录也会被记录到binlog中,相当于重复了。

that’s all ~~~

第一次在思否发文章,感觉格式啥不太标准。。见谅。。

    原文作者:失去头颅的迦梨
    原文地址: https://segmentfault.com/a/1190000019291266
    本文转自网络文章,转载此文章仅为分享知识,如有侵权,请联系博主进行删除。
点赞