MySQL中truncate误操作后的数据恢复案例

这篇文章主要介绍了MySQL中truncate误操作后的数据恢复案例,主要是要从日志中定位到truncate操作的地方然后备份之前丢失的数据,需要的朋友可以参考下

实际线上的场景比较复杂，当时涉及了truncate, delete 两个操作，经确认丢数据差不多7万多行，等停下来时，差不多又有共计1万多行数据写入。 这里为了简单说明，只拿弄一个简单的业务场景举例。

测试环境： Percona-Server-5.6.16

日志格式： mixed 没起用gtid

表结构如下：

1. CREATE TABLE `tb_wubx` ( 
2. `id` int(11) NOT NULL AUTO_INCREMENT, 
3. `name` varchar(32) DEFAULT NULL, 
4. PRIMARY KEY (`id`) 
5. ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8 
6.  
7. CREATE TABLE `tb_wubx` ( 
8. `id` int(11) NOT NULL AUTO_INCREMENT, 
9. `name` varchar(32) DEFAULT NULL, 
10. PRIMARY KEY (`id`) 
11. ) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8 

基于某个时间点有一个备份或是有全量的binlog是能恢复数据的一个唯一保证。 例如我们的备份就是一个表结构创建语句,binlog pos相关信息： mysql-bin.000004 , 4，然后进行了如下：

–t1时间 程序写入：

1. insert into tb_wubx(name) values(‘张三'),(‘李四'); 
2. insert into tb_wubx(name) values(‘隔壁老王'); 

–t2时间 某个人员失误

1. truncate table tb_wubx; 

–t3时间 程序写入

1. insert into tb_wubx(name) values(‘老赵'); 
2. update tb_wubx set name='老赵赵' where id=1; 

现在表里的数据情况：

1. mysql>select * from tb_wubx; 
2. +----+-----------+ 
3. | id | name | 
4. +----+-----------+ 
5. | 1 | 老赵赵 | 
6. +----+-----------+ 
7. 1 row in set (0.00 sec) 
8.  
9. mysql>select * from tb_wubx; 
10. +----+-----------+ 
11. | id | name | 
12. +----+-----------+ 
13. | 1 | 老赵赵 | 
14. +----+-----------+ 
15. 1 row in set (0.00 sec) 

可以见truncate table操作后，表的自增id又变更为从1开始，原来写入的数据应该是：

1. +—-+———–+ 
2. | id | name | 
3. +—-+———–+ 
4. | 1 | 张三 | 
5. +—-+———–+ 
6. | 2 | 李四 | 
7. +—-+———–+ 
8. | 3 | 隔壁老王 | 
9. +—-+———–+ 

如果没生truncate table操作，实际的数据应该为：

1. +—-+———–+ 
2. | id | name | 
3. +—-+———–+ 
4. | 1 | 张三 | 
5. +—-+———–+ 
6. | 2 | 李四 | 
7. +—-+———–+ 
8. | 3 | 隔壁老王 | 
9. +—-+———–+ 
10. | 4 | 老赵赵 | 
11. +—-+———–+ 

而且线上的恢复那个表时和序序开发人员了解才知道，原来那个id和缓存及其它地方有依赖，因为id乱了，也会造成程序错乱。这个时间修复id在程序层错乱的事，留给开发人员了关建是给他们讲明白恢复的结果是什么样，我们的关建任务是把数据恢复出来。好，接下来的工作是开始从binlog中恢复数据。

利用: show binary logs; 查看当的log文件分布， 然后利用show binlog events in ‘binary log文件'; 查看log文件的内容，目的是找到truncate发生的日志位置。

另外因为基于备份(由log的启始位置)或是从量log, 如果基于备份有log的起始位置，我们需要处理的log文件是启始位置到发生truncate的日值(后面的数据处理不了，会发生主建冲突的错误造成truncate后的数据不能恢复)，

如果是全量日志，需要从创建完mysql后库后的日志去处理到当前的发生truncate的位置(后面数据会因为主建冲突写不进去)

恢复准备工作，创建一个库用于恢复数据，这里创建了一个re_wubx, 及原结构的表: tb_wubx (相当于恢复了备份，过程省略)

1. mysql> show binary logs; 
2. +------------------+-----------+ 
3. | Log_name | File_size | 
4. +------------------+-----------+ 
5. | mysql-bin.000001 | 143 | 
6. | mysql-bin.000002 | 261 | 
7. | mysql-bin.000003 | 562 | 
8. | mysql-bin.000004 | 1144 | 
9. +------------------+-----------+ 
10. 4 rows in set (0.00 sec) 
11.  
12. mysql> show binary logs; 
13. +------------------+-----------+ 
14. | Log_name | File_size | 
15. +------------------+-----------+ 
16. | mysql-bin.000001 | 143 | 
17. | mysql-bin.000002 | 261 | 
18. | mysql-bin.000003 | 562 | 
19. | mysql-bin.000004 | 1144 | 
20. +------------------+-----------+ 
21. 4 rows in set (0.00 sec) 

我这里有一个备份文件就是那个创建表的sql语句，位置是mysql-bin.000004 , 4

在这个案例里我只用cover住mysql-bin.000004这个文件。

1. mysql>show binlog events in 'mysql-bin.000004'; 
2. +------------------+------+-------------+-----------+-------------+----------------------------------------------------+ 
3. | Log_name | Pos | Event_type | Server_id | End_log_pos | Info | 
4. +------------------+------+-------------+-----------+-------------+----------------------------------------------------+ 
5. | mysql-bin.000004 | 4 | Format_desc | 753306 | 120 | Server ver: 5.6.16-64.2-rel64.2-log, Binlog ver: 4 | 
6. | mysql-bin.000004 | 120 | Query | 753306 | 209 | use `wubx`; truncate table tb_wubx | 
7. | mysql-bin.000004 | 209 | Query | 753306 | 281 | BEGIN | 
8. | mysql-bin.000004 | 281 | Table_map | 753306 | 334 | table_id: 91 (wubx.tb_wubx) | 
9. | mysql-bin.000004 | 334 | Write_rows | 753306 | 393 | table_id: 91 flags: STMT_END_F | 
10. | mysql-bin.000004 | 393 | Xid | 753306 | 424 | COMMIT /* xid=1073 */ | 
11. | mysql-bin.000004 | 424 | Query | 753306 | 496 | BEGIN | 
12. | mysql-bin.000004 | 496 | Table_map | 753306 | 549 | table_id: 91 (wubx.tb_wubx) | 
13. | mysql-bin.000004 | 549 | Write_rows | 753306 | 602 | table_id: 91 flags: STMT_END_F | 
14. | mysql-bin.000004 | 602 | Xid | 753306 | 633 | COMMIT /* xid=1074 */ | 
15. | mysql-bin.000004 | 633 | Query | 753306 | 722 | use `wubx`; truncate table tb_wubx | 
16. | mysql-bin.000004 | 722 | Query | 753306 | 794 | BEGIN | 
17. | mysql-bin.000004 | 794 | Table_map | 753306 | 847 | table_id: 92 (wubx.tb_wubx) | 
18. | mysql-bin.000004 | 847 | Write_rows | 753306 | 894 | table_id: 92 flags: STMT_END_F | 
19. | mysql-bin.000004 | 894 | Xid | 753306 | 925 | COMMIT /* xid=1081 */ | 
20. | mysql-bin.000004 | 925 | Query | 753306 | 997 | BEGIN | 
21. | mysql-bin.000004 | 997 | Table_map | 753306 | 1050 | table_id: 92 (wubx.tb_wubx) | 
22. | mysql-bin.000004 | 1050 | Update_rows | 753306 | 1113 | table_id: 92 flags: STMT_END_F | 
23. | mysql-bin.000004 | 1113 | Xid | 753306 | 1144 | COMMIT /* xid=1084 */ | 
24. +------------------+------+-------------+-----------+-------------+----------------------------------------------------+ 
25. 19 rows in set (0.00 sec) 
26.  
27. mysql>show binlog events in 'mysql-bin.000004'; 
28. +------------------+------+-------------+-----------+-------------+----------------------------------------------------+ 
29. | Log_name | Pos | Event_type | Server_id | End_log_pos | Info | 
30. +------------------+------+-------------+-----------+-------------+----------------------------------------------------+ 
31. | mysql-bin.000004 | 4 | Format_desc | 753306 | 120 | Server ver: 5.6.16-64.2-rel64.2-log, Binlog ver: 4 | 
32. | mysql-bin.000004 | 120 | Query | 753306 | 209 | use `wubx`; truncate table tb_wubx | 
33. | mysql-bin.000004 | 209 | Query | 753306 | 281 | BEGIN | 
34. | mysql-bin.000004 | 281 | Table_map | 753306 | 334 | table_id: 91 (wubx.tb_wubx) | 
35. | mysql-bin.000004 | 334 | Write_rows | 753306 | 393 | table_id: 91 flags: STMT_END_F | 
36. | mysql-bin.000004 | 393 | Xid | 753306 | 424 | COMMIT /* xid=1073 */ | 
37. | mysql-bin.000004 | 424 | Query | 753306 | 496 | BEGIN | 
38. | mysql-bin.000004 | 496 | Table_map | 753306 | 549 | table_id: 91 (wubx.tb_wubx) | 
39. | mysql-bin.000004 | 549 | Write_rows | 753306 | 602 | table_id: 91 flags: STMT_END_F | 
40. | mysql-bin.000004 | 602 | Xid | 753306 | 633 | COMMIT /* xid=1074 */ | 
41. | mysql-bin.000004 | 633 | Query | 753306 | 722 | use `wubx`; truncate table tb_wubx | 
42. | mysql-bin.000004 | 722 | Query | 753306 | 794 | BEGIN | 
43. | mysql-bin.000004 | 794 | Table_map | 753306 | 847 | table_id: 92 (wubx.tb_wubx) | 
44. | mysql-bin.000004 | 847 | Write_rows | 753306 | 894 | table_id: 92 flags: STMT_END_F | 
45. | mysql-bin.000004 | 894 | Xid | 753306 | 925 | COMMIT /* xid=1081 */ | 
46. | mysql-bin.000004 | 925 | Query | 753306 | 997 | BEGIN | 
47. | mysql-bin.000004 | 997 | Table_map | 753306 | 1050 | table_id: 92 (wubx.tb_wubx) | 
48. | mysql-bin.000004 | 1050 | Update_rows | 753306 | 1113 | table_id: 92 flags: STMT_END_F | 
49. | mysql-bin.000004 | 1113 | Xid | 753306 | 1144 | COMMIT /* xid=1084 */ | 
50. +------------------+------+-------------+-----------+-------------+----------------------------------------------------+ 
51. 19 rows in set (0.00 sec) 

看到这个表刚开始就发生一次truncate, 那其实也可以说明我就恢复刚开始那个truncate到后来那个误操作的truncate table的语句之间的数据就是丢失的数据。

这个恢复可以从mysql-bin.000004 pos: 4到mysql-bin.000004 pos: 633 即：

1. mysqlbinlog --rewrite-db='wubx->re_wubx' --start-position=4 --stop-position=633 mysql-bin.000004 |mysql -S /tmp/mysql.sock re_wubx 
2.  
3.  
4. mysqlbinlog --rewrite-db='wubx->re_wubx' --start-position=4 --stop-position=633 mysql-bin.000004 |mysql -S /tmp/mysql.sock re_wubx 

恢复结果如下：

1. mysql -S /tmp/mysql.sock re_wubx; 
2. mysql>select count(*) from tb_wubx; 
3. +----------+ 
4. | count(*) | 
5. +----------+ 
6. | 3 | 
7. +----------+ 
8. 1 row in set (0.02 sec) 
9.  
10. mysql>select * from tb_wubx; 
11. +----+--------------+ 
12. | id | name | 
13. +----+--------------+ 
14. | 1 | 张三 | 
15. | 2 | 李四 | 
16. | 3 | 隔壁老王 | 
17. +----+--------------+ 
18. 3 rows in set (0.00 sec) 
19.  
20. mysql>insert into tb_wubx(name) select name from wubx.tb_wubx; 
21. Query OK, 1 row affected (0.00 sec) 
22. Records: 1 Duplicates: 0 Warnings: 0 
23.  
24. mysql> rename table wubx.tb_wubx to wubx.bak_tb_wubx; 
25. Query OK, 0 rows affected (0.04 sec) 
26.  
27. mysql> rename table re_wubx.tb_wubx to wubx.tb_wubx; 
28. Query OK, 0 rows affected (0.03 sec) 
29.  
30. mysql> select * from wubx.tb_wubx; 
31. +----+--------------+ 
32. | id | name | 
33. +----+--------------+ 
34. | 1 | 张三 | 
35. | 2 | 李四 | 
36. | 3 | 隔壁老王 | 
37. | 4 | 老赵赵 | 
38. +----+--------------+ 
39. 4 rows in set (0.00 sec) 
40.  
41. mysql -S /tmp/mysql.sock re_wubx; 
42. mysql>select count(*) from tb_wubx; 
43. +----------+ 
44. | count(*) | 
45. +----------+ 
46. | 3 | 
47. +----------+ 
48. 1 row in set (0.02 sec) 
49.  
50. mysql>select * from tb_wubx; 
51. +----+--------------+ 
52. | id | name | 
53. +----+--------------+ 
54. | 1 | 张三 | 
55. | 2 | 李四 | 
56. | 3 | 隔壁老王 | 
57. +----+--------------+ 
58. 3 rows in set (0.00 sec) 
59.  
60. mysql>insert into tb_wubx(name) select name from wubx.tb_wubx; 
61. Query OK, 1 row affected (0.00 sec) 
62. Records: 1 Duplicates: 0 Warnings: 0 
63.  
64. mysql> rename table wubx.tb_wubx to wubx.bak_tb_wubx; 
65. Query OK, 0 rows affected (0.04 sec) 
66.  
67. mysql> rename table re_wubx.tb_wubx to wubx.tb_wubx; 
68. Query OK, 0 rows affected (0.03 sec) 
69.  
70. mysql> select * from wubx.tb_wubx; 
71. +----+--------------+ 
72. | id | name | 
73. +----+--------------+ 
74. | 1 | 张三 | 
75. | 2 | 李四 | 
76. | 3 | 隔壁老王 | 
77. | 4 | 老赵赵 | 
78. +----+--------------+ 
79. 4 rows in set (0.00 sec) 

恢复完成。