暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

DBA说字段设置可为NULL会额外增加空间,我怼了他!

程序员阿牛 2021-07-06
277

点击蓝字获取更多精彩信息


背景

DBA 又把建表语句打回来了,原因是字段可空了!理由是为了省空间!!!!

为了证明这种说法错误,我给他上了一课

语句如下:

CREATE TABLE user_info (
id bigint unsigned NOT NULL AUTO_INCREMENT,
user_id int NOT NULL COMMENT '用户id',
user_name varchar(64NOT NULL COMMENT '真实姓名',
email varchar(30NOT NULL COMMENT '用户邮箱',
nick_name varchar(45COMMENT '昵称',
status tinyint NOT NULL COMMENT '用户状态,1-正常,2-注销,3-冻结',
address varchar(128COMMENT '家庭住址',
--省略了一些属性,篇幅原因,这里删掉了
PRIMARY KEY (id),
KEY idx_user_id (user_id)
ENGINE=InnoDB COMMENT='用户基本信息';

用户可能就是没有昵称啊,设置为可空,看起来也没啥问题啊!有没有一种被针对的感觉

其实你如果知道每条记录真正的存储格式,你就知道知道怎么怼他了。

正文

InnoDB页的概念

Page是Innodb存储的最基本结构,也是Innodb磁盘管理的最小单位,与数据库相关的所有内容都存储在Page结构里。

MySQL的客户端和服务端的交互最小单位也是Innodb页(默认大小为16K),也就是说如果你即使只查询一条记录,一次至少从磁盘上读取16K的内容到内存中。

Innodb行格式

我们平时往数据库插入一条条的记录,这些记录在磁盘上存放格式也是以行记录的方式的。

Innodb存储引擎目前有四种格式--COMPACT、REDUNDANT、DYNAMIC、COMPRESSED

从MySQL5.7开始,默认是DYNAMIC方式,我们用图片来看一下Innodb行格式大概示意图。(这里只讲COMPACT、DYNAMIC,因为这2者基本上是一样的,只有一些细微的差别‘,不做展开了)

一条记录不单单是只有真实数据,还有其他东西在里面,如下:

这里讲讲记录额外信息

这里只讲变长属性长度列表、NULL值列表2部分

1、变长属性长度列表

常见的关系型数据库都支持变长属性,比如上面的语句username varchar(64)
中,64是代表可存储的最大的字符数,如果某条记录的名字是“张三”,底层是怎么存储的呢?

Mysql势必要解决下面的一个问题,即:

我们总要让MySQL服务器知道每条记录的每个变长属性知道实际长度是多少,不然它会懵

我们来举一个栗子:

上面的记录user_name,email,nick_name、address都是varchar类型的,那么他存储的记录格式是什么样的呢

上图中的09、0b、06、09分别对应user_name,email,nick_name、address对应字节长度,16进制(实际上无空格,这里只是为了方便看)。

至于为什么是倒序放的,不是本文重点,这里先不做解答;你只需要记住行记录的格式,第一部分是记录所有可变长度字段的实际长度就行了

小彩蛋:varchar(M)中的M代表能存储的最大字符数,实际存储时都是按照字节来计算的,所以一个字段占用的实际字节数的公式:

RL(存储属性最多的字节数)=M(最多字符数)* W(当前字符集下最多需要几个字节表示一个字符)

所以在编码是utf8mb4的情况下,user_name最多占用的字节数=64 * 4 = 256,所以该属性需要2个字节表示长度

为什么不是1个字节,1个字节不正好是256吗?因为第一位是标记位,如果第一位是0,表示用1个字节就可以表示该属性的长度,如果第一位是1,表示需要用2个字节表示该属性的长度。

如果另一条记录是这样的:

则对应的行格式如下:

昵称为空,则不在变长长度列表中出现。

2、NULL值列表

我们在插入一条记录时,Innodb引擎怎么处理

  • 先统计允许为NULL的列有哪些
  • 如果建表语句中,没有可空的字段,就没有NULL值列表;如果有可空的字段,那么每个可空字段对应一个二进制位,1-代表NULL,0-不为NULL
  • 最小单位需要用字节来表示NULL值列表,如果只有2个可空值,至少也需要1个字节(8 bit)来表示,高位补0,如张无忌对应的NULL值列表为00000011,张三丰对应的NULL值列表为00000000

张三丰对应的记录行格式(00000000):

张无忌对应的记录行格式(00000011):

综上

如果一张表没有可空的字段,比如建表语句如下:语句如下:

CREATE TABLE user_info (
id bigint unsigned NOT NULL AUTO_INCREMENT,
user_id int NOT NULL COMMENT '用户id',
user_name varchar(64NOT NULL COMMENT '真实姓名',
email varchar(30NOT NULL COMMENT '用户邮箱',
nick_name varchar(45NOT NULL COMMENT '昵称',
status tinyint NOT NULL COMMENT '用户状态,1-正常,2-注销,3-冻结',
address varchar(128NOT NULL COMMENT '家庭住址',
--省略了一些属性,篇幅原因,这里删掉了
PRIMARY KEY (id),
KEY idx_user_id (user_id)
ENGINE=InnoDB COMMENT='用户基本信息';

对应的行结构如下:

没有NULL值列表哪一项,但是虽然NULL列表中没有了,变长列表中会有,同时真实数据部分也会有,占用的空间更大,可见为了省空间这种说法站不住脚。

总结

原因到底是为什么呢?MySQL官方有那么一句话:

NULL columns require additional space in the rowto record whether their values are NULL. For MyISAM tables, each NULL columntakes one bit extra, rounded up to the nearest byte.

中文意思是:

Mysql难以优化引用可空列查询,它会使索引、索引统计和值更加复杂。可空列需要更多的存储空间,还需要mysql内部进行特殊处理。可空列被索引后,每条记录都需要一个额外的字节,还能导致MYisam 中固定大小的索引变成可变大小的索引。

照此看来,官方说法是其中一点原因

作者拙见:

  • 所有使用NULL值的情况,都可以通过一个有意义的值的表示,这样有利于代码的可读性和可维护性,并能从约束上增强业务数据的规范性。
  • NULL值到非NULL的更新无法做到原地更新,更容易发生索引分裂,从而影响性能。
  • NULL值在timestamp类型下容易出问题,特别是没有启用参数explicit_defaults_for_timestamp
  • NOT IN、!= 等负向条件查询在有 NULL 值的情况下返回永远为空结果,查询容易出错,不是自己想要的结果,甚至可能出现重大损失。

往期回顾


在看的,麻烦点一下再走好吗
文章转载自程序员阿牛,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论