本文共 1430 字，大约阅读时间需要 4 分钟。
MySQL InnoDB存储模型及磁盘物理存储机制
为什么不能直接更新磁盘上的数据
在MySQL中，直接对磁盘文件进行读写操作的性能非常低下。随机读写对磁盘的性能要求极高，而数据库的高并发场景往往需要每秒处理数千次请求。因此，MySQL引入了一种复杂的数据存取机制，通过内存数据缓存和磁盘日志机制来实现数据的高效读写。具体来说，所有的更新操作都先在内存中完成，然后通过顺序写日志的方式提交事务。这种机制保证了每个更新操作都能在内存中高效执行，从而在物理存储层面实现了高性能的数据操作。
数据页的概念及作用
为了解决直接读写磁盘性能问题，InnoDB引入了数据页的概念。每个数据页默认大小为16KB，这样可以通过批量读写的方式提升磁盘操作效率。数据页的划分方式允许MySQL在内存中缓存多个数据页，从而减少磁盘I/O操作的次数。此外，数据页还支持预读机制，通过加载多个数据页进行批量操作，进一步提升整体性能。
具体来说，当进行增删改查操作时，MySQL会将需要修改的数据页加载到内存中进行更新。修改完成后，这些修改后的数据页会被写入到磁盘文件中。通过这种方式，MySQL能够在内存中完成所有操作，确保磁盘读写的高效性。
一行数据在磁盘上的存储格式
在磁盘上，一行数据的存储格式包含以下几个关键部分：
变长字段长度列表：用于记录该行数据中所有变长字段的长度信息。变长字段的长度按逆序存储，以便在读取时能够正确解析。
NULL值列表：对于允许为NULL的字段，磁盘上会额外存储一个二进制位，表示该字段是否为NULL。这些NULL值信息也按逆序存储。
数据头：数据头是一个40位的二进制字段，主要用于存储数据页的相关信息，包括删除标记、最小值标记、记录数、记录位置、记录类型等。
真实数据：包括字段值和隐藏字段（如ROW_ID、TRX_ID、ROLLBACK_ptr等）。字段值会根据其类型（变长或固定长）被存储，变长字段的长度由长度列表决定。
数据页的物理存储结构
在磁盘上，数据页的存储结构分为多个部分：
文件头：占用38个字节，存储数据页的基本信息。
数据页头：占用56个字节，包含数据页的关键属性信息。
最大记录和最小记录：占用26个字节，用于存储数据页中的最大和最小记录信息。
数据行区域：存储一行数据的真实内容，包括字段值和隐藏字段。
空闲空间：用于存储数据页中未使用的空间。
数据页目录：存储数据页中的索引信息。
文件尾部：占用8个字节，存储数据页的结束标记。
行溢出与溢出页
在InnoDB中，当一行数据的大小超过数据页的容量时，会发生行溢出。这种情况下，数据页会被拆分为多个部分，超过数据页容量的部分会被存储在其他数据页中。这些溢出页通过20字节的指针指向其他数据页，从而形成链表结构。
表空间的物理存储结构
表空间是InnoDB存储引擎中的核心概念，它在磁盘上以特定文件名（如表名.ibd）的形式存在。表空间包含多个数据区，每个数据区包含64个数据页（1MB），数据区再按256个为一组存储。表空间的第一组数据区的前三个数据页用于存储特殊信息，其他组的数据区的前两个数据页也用于存储相关属性。
总结
通过以上机制，InnoDB能够在内存和磁盘之间高效管理数据。数据页的划分、变长字段的处理、NULL值的存储以及行溢出的机制，共同保证了数据库在高并发场景下的性能表现。这种存储模型不仅支持大数据量的存储，还能通过高效的磁盘读写机制满足复杂的业务需求。
发表评论
最新留言
关于作者
