前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >optimize 回收表空间的一些说明

optimize 回收表空间的一些说明

作者头像
保持热爱奔赴山海
发布2019-09-17 10:51:46
9060
发布2019-09-17 10:51:46
举报
文章被收录于专栏:饮水机管理员饮水机管理员

optimize命令回收表空间的说明

线上服务器,有张大表需要用pt-archiver根据时间划分归档大量数据到另一个新表中。原先200G的表,在归档完成后,du -hs 显示依然是200G的大小,删除了大量的行记录但是实际上空间是不会释放的。

这种情况下,我们就要使用optimize命令重建表以达到释放表空间的目的。

(好像是从5.6.6之后,optimize不锁表了,但是optimize操作会进行rebuild表操作,要确保磁盘剩余空间足够存放新表的大小,不然操作会失败)

另外,如果在主库执行optimize table会造成从库延迟,这种情况下,可以使用 optiminze no_write_to_binlog table xxxx ; 这样就不会把optimize操作写入binlog。主库执行完后,再到从库执行optimize table操作。

姜承尧的py_innodb_page_info 工具 下载地址:http://pan.baidu.com/s/1c2o0Tag 

模拟过程如下:

代码语言:javascript
复制
use test;
CREATE TABLE `t` (
  `a` int(10) unsigned NOT NULL AUTO_INCREMENT,
  `b` char(10) DEFAULT NULL,
  PRIMARY KEY (`a`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 ROW_FORMAT=COMPACT;
insert into t (b) select 'aaaaaaa';
insert into t(b) select b from t;    

多执行几次这个命令,造出大量的行数据

然后使用py_innodb_page_info分析page,如下,可以看到存了数据的page很多【下图红色部分】

代码语言:javascript
复制
[root@master /root/py_innodb_page_type ]#./py_innodb_page_info.py -v /data/mysql/test/t.ibd 
page offset 00000000, page type <FileSpace Header>
page offset 00000001, page type <Insert BufferBitmap>
page offset 00000002, page type <FileSegment inode>
page offset 00000003, page type<B-tree Node>, page level <0000>
page offset 00000004, page type<B-tree Node>, page level <0000>
page offset 00000005, page type<B-tree Node>, page level <0000>
page offset 00000006, page type<B-tree Node>, page level <0000>
page offset 00000007, page type<B-tree Node>, page level <0000>
page offset 00000008, page type<B-tree Node>, page level <0000>
page offset 00000009, page type<B-tree Node>, page level <0000>
page offset 0000000a, page type<B-tree Node>, page level <0000>
page offset 0000000b, page type<B-tree Node>, page level <0000>
page offset 0000000c, page type<B-tree Node>, page level <0000>
page offset 0000000d, page type<B-tree Node>, page level <0000>
page offset 0000000e, page type<B-tree Node>, page level <0000>
page offset 0000000f, page type<B-tree Node>, page level <0000>
page offset 00000010, page type<B-tree Node>, page level <0000>
page offset 00000000, page type <Freshly AllocatedPage>
page offset 00000000, page type <FreshlyAllocated Page>
Total number of page: 19:
Freshly Allocated Page: 2
Insert Buffer Bitmap: 1
File Space Header: 1
B-tree Node: 14
File Segment inode: 1

然后大量删除数据

代码语言:javascript
复制
delete from test.t where a>100;  

开始删除大量的数据(只保留100条记录,确保数据应该在第一个数据页存的下)

然后用hexdump去看下innodb的第二个page信息

代码语言:javascript
复制
hexdump -C -s 65536 -n 16384 /data/mysql/test/t.ibd   

发现这个page的数据还是很多,它们并没有被真正的删除 (实际上当一条记录被删除后,该空间只是标记为空闲了,它会被加入到空间链表里面)

### hexdump命令说明:

## -s 从啥位置开始取数据,-n 取出多少bytes的数据。 

## 因为每个page 16k。InnoDB前3个page是存放其它数据的。第一个data page是从16*1024*3=49152位置开始的。第二个data page是从16*1024*4=65536开始的。

重建下test.t表试试效果:

代码语言:javascript
复制
root@localhost [test]> optimize table t;

再次使用py_innodb_page_info分析page,如下,可以看到page少了很多【下图红色部分】,基本上都被回收了。

代码语言:javascript
复制
[root@master /root/py_innodb_page_type ]#./py_innodb_page_info.py -v /data/mysql/test/t.ibd 
page offset 00000000, page type <FileSpace Header>
page offset 00000001, page type <InsertBuffer Bitmap>
page offset 00000002, page type <FileSegment inode>
page offset 00000003, page type<B-tree Node>, page level <0000>
page offset 00000000, page type <FreshlyAllocated Page>
page offset 00000000, page type <FreshlyAllocated Page>
Total number of page: 6:
Freshly Allocated Page: 2
Insert Buffer Bitmap: 1
File Space Header: 1
B-tree Node: 1
File Segment inode: 1

然后再用hexdump去看下innodb的第二个page信息,发现这个page的数据已经全部是0了,是一个空白的page

代码语言:javascript
复制
[root@master /tmp ]# hexdump -C -s 65536 -n16384 /data/mysql/test/t.ibd     
00010000 00 00 00 00 00 00 00 00  00 00 0000 00 00 00 00  |................|
*
00014000
本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2017-08-06 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
云数据库 SQL Server
腾讯云数据库 SQL Server (TencentDB for SQL Server)是业界最常用的商用数据库之一,对基于 Windows 架构的应用程序具有完美的支持。TencentDB for SQL Server 拥有微软正版授权,可持续为用户提供最新的功能,避免未授权使用软件的风险。具有即开即用、稳定可靠、安全运行、弹性扩缩等特点。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档