闲娱麻将作弊 来宝广东麻将作弊 闲娱启东麻将作弊

到现在为止，对于我们来说还是一个黑盒，我们只负责使用客户端发送请求并等待服务器返回结果，表中的数据到底存到了哪里？以什么格式存放的？是以什么方式来访问的这些数据？这些问题我们统统不知道，对于未知领域的探索向来就是社会主义核心价值观中的一部分，作为新一代社会主义接班人，不把它们搞懂怎么支援祖国建设呢？

我们前边唠叨请求处理过程的时候提到过，服务器上负责对表中数据的读取和写入工作的部分是，而服务器又支持不同类型的存储引擎，比如、、啥的，不同的存储引擎一般是由不同的人为实现不同的特性而开发的，真实数据在不同存储引擎中存放的格式一般是不同的，甚至有的存储引擎比如都不用磁盘来存储数据，也就是说关闭服务器后表中的数据就消失了。由于是默认的存储引擎，也是我们最常用到的存储引擎，我们也没有那么多时间去把各个存储引擎的内部实现都看一遍，所以本集要唠叨的是使用作为存储引擎的数据的存储结构，了解了一个存储引擎的数据存储结构之后，其他的存储引擎都是依瓢画葫芦，等我们用到了再说哈～

InnoDB页简介

是一个将表中的数据存储到磁盘上的存储引擎，所以即使关机后重启我们的数据还是存在的。而真正处理数据的过程是发生在内存中的，所以需要把磁盘中的数据加载到内存中，如果是处理写入或修改请求的话，还需要把内存中的内容刷新到磁盘上。而我们知道读写磁盘的速度非常慢，和内存读写差了几个数量级，所以当我们想从表中获取某些记录时，存储引擎需要一条一条的把记录从磁盘上读出来么？不，那样会慢死，采取的方式是：将数据划分为若干个页，以页作为磁盘和内存之间交互的基本单位，InnoDB中页的大小一般为16KB。也就是在一般情况下，一次最少从磁盘中读取16KB的内容到内存中，一次最少把内存中的16KB内容刷新到磁盘中。

InnoDB行格式

我们平时是以记录为单位来向表中插入数据的，这些记录在磁盘上的存放方式也被称为或者。设计存储引擎的大叔们到现在为止设计了4种不同类型的，分别是、、和行格式，随着时间的推移，他们肯定会设计出更多的行格式，但是不管怎么变，在原理上大体都是相同的。

指定行格式的语法

是在我们创建或修改表的语句中指定的

比如我们在数据库里创建一个演示用的表，可以这样指定它的：

可以看到我们刚刚创建的这个表的就是，另外，我们还指定了这个表的字符集为，因为字符集只包括空格、标点符号、数字、大小写字母和一些不可见字符，所以我们的汉字是不能存到这个表里的。我们现在向这个表中插入两条记录：

表中的记录就是这个样子的：

演示表的内容也填充好了，现在我们就来看看各个行格式下的存储方式到底有啥不同吧～

COMPACT行格式

废话不多说，直接看图：

image_1c9g4t114n0j1gkro2r1h8h1d1t16.png-42.4kB

大家从图中可以看出来，一条完整的记录其实可以被分为和两大部分，下边我们详细看一下这两部分的组成。

记录的额外信息

这部分信息是服务器为了描述这条记录而不得不额外添加的一些信息，这些额外信息分为3类，分别是、和，我们分别看一下。

变长字段长度列表

前边说过支持一些变长的数据类型，比如、、各种类型，各种类型，这些变长的数据类型占用的存储空间分为两部分：

真正的数据内容

占用的字节数

因为如果不保存真实数据占用的字节数的话，MySQL服务器也不知道我们存储的数据究竟有多长。在行格式中，把所有变长类型的列的长度都存放在记录的开头部位形成一个列表，按照列的顺序逆序存放，我们再次强调一遍，是逆序存放！我们拿表中的第一条记录来举个例子。因为表的、、列都是类型的，也就是变长的数据类型，所以这三个列的值的长度都需要保存在记录开头处，因为表中的各个列都使用的是字符集，所以每个字符只需要1个字节来进行编码，来看一下第一条记录各列内容的长度：

又因为这些长度值需要按照列的逆序存放，所以最后的字节串用十六进制表示的效果就是（各个字节之间实际上没有空格，用空格隔开只是方便理解）：

把这个字节串组成的填入上边的示意图中的效果就是：

image_1c9gbruvo504dlg1qsf19nbeu878.png-37kB

由于第一行记录中、、列中的字符串都比较短，也就是说内容占用的字节数比较小，用1个字节就可以表示，但是如果变长列的内容占用的字节数比较多，可能就需要用2个字节来表示。具体用1个还是2个字节来表示真实数据占用的字节数，有它的一套规则，因为用汉字描述很长的概念很容易变得啰嗦从而让人迷惑，所以我们用公式来表示一下，首先声明一下、和的意思：

假设某个字符集中表示一个字符最多需要使用的字节数为，也就是使用语句的结果中的列，比方说字符集中的就是，字符集中的就是，字符集中的就是。

对于变长类型来说，这种类型表示能存储最多个字符，所以这个类型能表示的字符串最多占用的字节数就是，

假设它存储的字符串占用的字节数是。

所以确定使用1个字节还是2个字节表示真正字符串占用的字节数的规则就是这样：

如果，那么使用1个字节来表示真正字符串占用的字节数。

如果，则分为两种情况：

如果，则用1个字节来表示真正字符串占用的字节数

如果，则用2个字节来表示真正字符串占用的字节数

需要注意的一点是，变长字段长度列表中只存储值为非NULL的列内容占用的长度，值为NULL的列的长度是不储存的。也就是说对于第二条记录来说，因为列的值为，所以只需要存储和列的长度即可。其中列存储的值为，占用的字节数为，列存储的值为，占用的字节数为，所以需2个字节。填充完的两条记录的对比图如下：

image_1c9grq2b2jok1062t8tov21lqjbj.png-42.6kB

NULL值列表

我们知道表中的某些列可能存储值，如果把这些NULL值都放到中存储会很占地方，所以行格式把这些值为的列统一管理起来，存储到值列表中，它的处理过程是这样的：

首先统计表中允许存储的列有哪些。

我们前边说过，主键列、被修饰的列都是不可以存储值的，所以在统计的时候不会把这些列算进去。比方说表的3个列、、都是允许存储值的，而列是被修饰，不允许存储值。

如果表中没有允许存储NULL的列，则NULL值列表也不存在了，否则将每个允许存储的列对应一个二进制位，二进制位按照列的顺序逆序排列，二进制位表示的意义如下：

因为表有3个值允许为的列，所以这3个列和二进制位的对应关系就是这样：

image_1c9g88mtt1tj51ua1qh51vjo12pg5k.png-10.4kB

再一次强调，二进制位按照列的顺序逆序排列，所以第一个列和最后一个二进制位对应。

二进制位的值为时，代表该列的值为。

二进制位的值为时，代表该列的值不为。

规定必须用整数个字节的位表示，如果使用的二进制位个数不是整数个字节，则在字节的高位补。

表只有3个允许为的列，对应3个二进制位，不足一个字节，所以在字节的高位补，效果就是这样：

image_1c9g8g27b1bdlu7t187emsc46s61.png-19.4kB

知道了规则之后，我们再返回头看表中的两条记录中的应该怎么储存。因为只有、、这3个列允许存储值，所以所有记录的只需要一个字节。

对于第一条记录来说，、、这3个列的值都不为，所以它们对应的二进制位都是，画个图就是这样：

image_1c9g8m05b19ge1c8v2bf163djre6e.png-21.5kB

所以第一条记录的用十六进制表示就是：。

对于第二条记录来说，、、这3个列中和的值都为，所以这3个列对应的二进制位的情况就是：

image_1c9g8ps5c1snv1bhj3m48151sfl6r.png-20.6kB

所以第一条记录的用十六进制表示就是：。

所以这两条记录在填充了后的示意图就是这样：

image_1c9grs9m4co8134u1t2rjhm1q6rc0.png-39kB

记录头信息

除了、之外，还有一个用于描述记录的，它是由固定的个字节组成。个字节也就是个二进制位，不同的位代表不同的意思，如图：

image_1c9geiglj1ah31meo80ci8n1eli8f.png-29.5kB

这些二进制位代表的详细信息如下表：

大家不要被这么多的属性和陌生的概念给吓着，我这里只是为了内容的完整性把这些位代表的意思都写了出来，现在没必要把它们的意思都记住，记住也没啥用，现在只需要看一遍混个脸熟，等之后用到这些属性的时候我们再回过头来看。

因为我们并不清楚这些属性详细的用法，所以这里就不分析各个属性值是怎么产生的了，之后我们遇到会详细看的。所以我们现在直接看一下中的两条记录的分别是什么：

image_1c9gruej1am71ph9refjli16lhct.png-149.8kB

记录的真实数据

除了我们插入的那些列的数据，会为每个记录默认的添加一些列（也称为），具体的列如下：

需要注意的是，MySQL服务器会为每条记录都添加transaction_id和roll_pointer这两个列，但是row_id只有在表没有定义主键的时候才会为记录添加，相当于MySQL服务器帮我们来添加一个主键。这些列的值不用我们操心，服务器会自己帮我们添加的。

因为表并没有定义主键，所以服务器会为每条记录增加上述的3个列。现在看一下加上的两个记录长什么样吧：

image_1c9h256f9nke14311adhtu61ie2dn.png-92kB

看这个这个图的时候我们需要注意几点：

表使用的是字符集，所以就表示字符串，就表示字符串，以此类推。

注意第1条记录中列的值，它是类型的，它实际存储的字符串是：，字符集中的字节表示是，虽然表示这个字符串只占用了2个字节，但整个列仍然占用了10个字节的空间，除真实数据以外的8个字节的统统都用空格字符填充，空格字符在字符集的表示就是。

注意第2条记录中和列的值都为，它们被存储在了前边的处，在记录的真实数据处就不再冗余存储，从而节省存储空间。

Redundant行格式

其实知道了行格式之后，其他的行格式就是依葫芦画瓢了。我们现在要介绍的行格式是之前用的一种行格式，也就是说它已经非常老了，但是本着知识完整性的角度还是要提一下，大家乐呵乐呵的看就好。

画个图展示一下行格式的全貌：

image_1c9h896lcuqi16081qub1v8c12jkft.png-36.2kB

现在我们把表的行格式修改为：

为了方便大家理解和节省篇幅，我们直接把表在行格式下的两条记录的真实存储数据提供出来，之后我们着重分析两种行格式的不同即可。

image_1c9h8tnav166c187m1nhap61153qgn.png-91.6kB

下边我们从各个方面看一下行格式有什么不同的地方：

字段长度偏移列表

注意行格式的开头是，而行格式的开头是，与有两处不同：

没有了变长两个字，意味着行格式会把该条记录中所有列（包括）的长度都按照逆序存储到。

多了个偏移两个字，这意味着计算列值长度的方式不像行格式那么直观，它是采用两个相邻数值的差值来计算各个列值的长度。

比如第一条记录的就是：

因为它是逆序排放的，所以按照列的顺序排列就是：

按照两个相邻数值的差值来计算各个列值的长度的意思就是：

记录头信息

行格式的记录头信息占用字节，个二进制位，这些二进制位代表的意思如下：

第一条记录中的头信息是：

根据这六个字节可以计算出各个属性的值，如下：

与行格式的记录头信息对比来看，有两处不同：

行格式多了和这两个属性。

行格式没有这个属性。

NULL值列表

行格式并没有。

记录的真实数据

因为第二条记录的列的值是，我们看到在行格式中使用来表示值，而在行格式中，值为的列并不占用存储。

除了以上的几点之外，行格式和行格式还是大致相同的。

行溢出数据

VARCHAR(M)最多能存储的数据

我们知道对于类型的列最多可以占用个字节。其中的代表该类型最多存储的字符数量，如果我们使用字符集的话，一个字符就代表一个字节，我们看看是否可用：

从报错信息里可以看出，对一条记录占用的最大存储空间是有限制的，除了或者类型的列之外，其他所有的列（不包括隐藏列和记录头信息）占用的字节长度加起来不能超过个字节。所以服务器建议我们把存储类型改为或者的类型。这个个字节除了列本身的数据之外，还包括一些，比如说我们为了存储一个类型的列，需要占用3部分存储空间：

真实数据

真实数据占用字节的长度

值标识，如果该列有属性则可以没有这部分存储空间

如果该类型的列没有属性，那最多只能存储个字节的数据，因为真实数据的长度需要占用2个字节，值标识需要占用1个字节：

如果类型的列有属性，那最多只能存储个字节的数据，因为真实数据的长度需要占用2个字节，不需要值标识：

如果类型的列使用的不是字符集，那会怎么样呢？来看一下：

从执行结果中可以看出，如果类型的列使用的不是字符集，那的最大取值取决于该字符集表示一个字符最多需要的字节数。比方说字符集表示一个字符最多需要个字符，那在该字符集下，的最大取值就是，也就是说最多能存储个字符；字符集表示一个字符最多需要个字符，那在该字符集下，的最大取值就是，也就是说最多能存储个字符。

记录中的数据太多产生的溢出

我们以字符集下的表为例，插入一条记录：

其中的是一个函数调用，它表示生成一个把字符重复次的字符串。前边说过，中磁盘和内存交互的基本单位是，也就是说是以为基本单位来管理存储空间的，我们的记录都会被分配到某个中存储。而一个页的大小一般是，也就是字节，而一个类型的列就最多可以存储个字节，这样就可能造成一个页存放不了一条记录的尴尬情况。

在和行格式中，对于占用存储空间非常大的列，在处只会存储该列的一部分数据，把剩余的数据分散存储在几个连续的页中，只在处用20个字节存储指向这些页的地址，从而可以找到剩余数据所在的页，如图所示：

image_1c9j5tdn316v11j8m15631f533r5h4.png-121.7kB

从图中可以看出来，对于和行格式来说，如果某一列中的数据非常多的话，在本记录的真实数据处只会存储该列的前个字节的数据和一个指向其他页的地址，然后把剩下的数据存放到其他页中，这个过程也叫做。画一个简图就是这样：

image_1c9jc8v88uo3dpoav8n70um1hu.png-22.7kB

不只是VARCHAR(M)类型的列，其他的TEXT、BLOB类型的列在存储数据非常多的时候也会发生。

临界点

那发生的临界点是什么呢？也就是说在列存储多少字节的数据时就会发生？

中规定一个页中至少存放两行记录，至于为什么这么规定我们之后再说，现在看一下这个规定造成的影响。以我们以上边的表为例，它只有一个列，我们往这个表中插入两条记录，每条记录最少插入多少字节的数据才会的现象呢？这得分析一下页中的空间都是如何利用的。

每个页除了存放我们的记录以外，也需要存储一些额外的信息，乱七八糟的额外信息加起来需要个字节的空间（现在只要知道这个数字就好了），其他的空间都可以被用来存储记录。

每个记录需要的额外信息是字节。

这27个字节包括下边这些部分：

2个字节用于存储真实数据的长度

1个字节用于存储列是否是NULL值

5个字节大小的头信息

6个字节的列

6个字节的列

7个字节的列

假设一个列中存储的数据字节数为n，那么发生现象时需要满足这个式子：

求解这个式子得出的解是：。也就是说如果一个列中存储的数据不大于个字节，那就不会发生，否则就会发生。

我们这个只是针对只有一个列的表来说的，如果表中有多个列，那上边的式子又得改一改了，所以重点就是：你不用关注这个临界点是什么，只要知道如果我们想一个行中存储了很大的数据时，可能发生的现象。

Dynamic和Compressed行格式

下边要介绍两个比较新的行格式，和行格式，我现在使用的MySQL版本是，它的默认行格式就是，这俩行格式和行格式贼像，只不过在处理数据时有点儿分歧，它们不会在记录的真实数据处存储字符串的前个字节，而是把所有的字节都存储到其他页面中，只在记录的真实数据处存储其他页面的地址，就像这样：

image_1c9jcd59e1mbu31gcc14q6vgsir.png-17.8kB

行格式和不同的一点是，行格式会把存储到其他页面的数据采用压缩算法进行压缩，以节省空间。

CHAR(M)列的存储格式

表的、、列的类型是，而列的类型是，我们说在行格式下只会把变成类型的列的长度逆序存到中，就像这样：

image_1c9jdkga71kegkjs14o111ov1ce3kn.png-12.5kB

但是这只是因为我们的表采用的是字符集，这个字符集是一个定长字符集，也就是说表示一个字符采用固定的一个字节，如果采用变长的字符集的话，列的长度也会被存储到中，比如我们修改一下表的字符集：

修改该列字符集后记录的也发生了变化，如图：

image_1c9jeb6defgf1o981lgfciokjl4.png-43.1kB

这就意味着：对于CHAR(M)类型的列来说，当列采用的是定长字符集时，该列占用的字节数不会被加到变长字段长度列表，而如果采用变长字符集时，该列占用的字节数也会被加到变长字段长度列表。

总结

页是中磁盘和内存交互的基本单位，也是是管理存储空间的基本单位。

指定和修改行格式的语法如下：

目前定义了4中行格式

COMPACT行格式

具体组成如图：

image_1c9g4t114n0j1gkro2r1h8h1d1t16.png-42.4kB

Redundant行格式

具体组成如图：

image_1c9h896lcuqi16081qub1v8c12jkft.png-36.2kB

Dynamic和Compressed行格式

这两种行格式类似于，只不过在处理行溢出数据时有点儿分歧，它们不会在记录的真实数据处存储字符串的前768个字节，而是把所有的字节都存储到其他页面中，只在记录的真实数据处存储其他页面的地址。

另外，行格式会把存储在其他页面中的数据压缩处理。

一个页一般是，当记录中的数据太多，当前页放不下的时候，会把多余的数据存储到其他页中，这种现象称为。

对于 CHAR(M) 类型的列来说，当列采用的是定长字符集时，该列占用的字节数不会被加到变长字段长度列表，而如果采用变长字符集时，该列占用的字节数也会被加到变长字段长度列表。