Exploring InnoDB page management with innodb_ruby（5.用innodb

本文引用的是2014年2月3日的innodb_ruby 0.8.8版本。
在《学习InnoDB:核心之旅》中，我在innodb_ruby项目中引入了一个新的库和命令行工具。稍后，在对innodb_ruby的介绍中，我将介绍innodb_space命令行工具的安装和一些快速演示。
在我的上一篇文章《InnoDB空间文件中的页面管理》中，我描述了InnoDB的区段、文件段和空闲空间管理结构。现在，我将提供几个使用innodb_space在实际表中检查这些结构的演示。

一个最小的空表

我创建了一个空表(模式无关紧要)来说明InnoDB页面管理结构的“最小”状态。space-page-type-regions模式将汇总同一页面类型的所有相邻区域的类型：

$ innodb_space -f test/e.ibd space-page-type-regions
start       end         count       type                
0           0           1           FSP_HDR             
1           1           1           IBUF_BITMAP         
2           2           1           INODE               
3           3           1           INDEX               
4           5           2           FREE (ALLOCATED)

该表为IBD空间文件分配了标准页:FSP_HDR、IBUF_BITMAP、INODE和(空)索引的根索引页。还有两个未使用的空闲(已分配)页面。
space-lists模式可以用于汇总空间中的区段描述符和inode列表:

$ innodb_space -f test/e.ibd space-lists
name                length      f_page      f_offset    l_page      l_offset    
free                0           0           0           0           0           
free_frag           1           0           158         0           158         
full_frag           0           0           0           0           0           
full_inodes         0           0           0           0           0           
free_inodes         1           2           38          2           38

只有free_frag区段描述符有全部的列，并且其中只有一个区段。free_inodes列表中只有一个INODE页面。
free_frag列表的内容可以使用space-list-iterate模式进行检测，该模式将打印输出一个图形，说明一个区段列表中所有区段内页面的使用情况("#“表示该页面已被使用，”."表示该页面是空闲的):

$ innodb_space -f test/e.ibd -L free_frag space-list-iterate
start_page  page_used_bitmap                                                
0           ####............................................................

空间中所有索引中的文件段可以用space-indexes模式进行汇总:

$ innodb_space -f test/e.ibd space-indexes
id          root        fseg        used        allocated   fill_factor 
16          3           internal    1           1           100.00%     
16          3           leaf        0           0           0.00%

只有内部文件段分配了页，并且它只有一个分配的页。index-fseg-internal-lists模式将汇总内部文件段中的区段列表:

$ innodb_space -f test/e.ibd -p 3 index-fseg-internal-lists
name                length      f_page      f_offset    l_page      l_offset    
free                0           0           0           0           0           
not_full            0           0           0           0           0           
full                0           0           0           0           0

这三个列表都是空的，因为这个空表没用分配任何完整的区段，那么使用过的page去哪了呢？那是一个片段页面，可以通过index-fseg-internal-frag-pages 列出。

$ innodb_space -f test/e.ibd -p 3 index-fseg-internal-frag-pages
page        index   level   data    free    records 
3           16      0       0       16252   0

这是一个最小的状态，大部分情况下是空的账簿结构和一个索引页。让我们看看一个包含一些真实数据的表：

一个有100万行的表

在对innodb_ruby的简要介绍中，我创建了一个包含100万行的表。我们将在这里的示例中使用相同的表。
总共有2,165页，其中大多数类型索引作为一个典型的表将是:

$ innodb_space -f test/t.ibd space-page-type-regions
start       end         count       type                
3           37          35          INDEX               
38          63          26          FREE (ALLOCATED)    
64          2188        2125        INDEX               
2189        2239        51          FREE (ALLOCATED)    
2240        2240        1           INDEX               
2241        2303        63          FREE (ALLOCATED)    
2304        2304        1           INDEX               
2305        2367        63          FREE (ALLOCATED)    
2368        2368        1           INDEX               
2369        2431        63          FREE (ALLOCATED)    
2432        2432        1           INDEX               
2433        2495        63          FREE (ALLOCATED)    
2496        2496        1           INDEX               
2497        2687        191         FREE (ALLOCATED)

注意，在索引页块之间存在一些分配(空闲)页的间隙。InnoDB不能保证它按顺序使用空闲页面，很多关于批量数据加载的优化会导致页面被打乱顺序使用。(更多关于页面分割和这些优化将在以后的文章中介绍。)
看看这个space的列表，实际上有一些区段是空闲的，通常也有一个区段是free_frag:

$ innodb_space -f test/t.ibd space-lists
name                length      f_page      f_offset    l_page      l_offset    
free                2           0           1758        0           1798        
free_frag           1           0           158         0           158         
full_frag           0           0           0           0           0           
full_inodes         0           0           0           0           0           
free_inodes         1           2           38          2           38

空闲区段描述符列表中的页面都是空闲的，如预期的那样:

$ innodb_space -f test/t.ibd -L free space-list-iterate
2560        ................................................................
2624        ................................................................

free_frag范围描述符列表显示了一些“片段”页面被使用:

$ innodb_space -f test/t.ibd -L free_frag space-list-iterate
start_page  page_used_bitmap                                                
0           ######################################..........................

索引文件段显示了分配给叶文件段的页面，这也是预期的(B+树中只有3个非叶内部页面来管理2,137个叶页面):

$ innodb_space -f test/t.ibd space-indexes
id          root        fseg        used        allocated   fill_factor 
15          3           internal    3           3           100.00%     
15          3           leaf        2162        2528        85.52%

你还可以看到，叶的索引文件段分配的页面多余它实际使用的页，显示了85.52%的填充因子，这是由于InnoDB的片段填充因子。他在库存MySQL中固定为87.5%,现在这个值你可以自行配置，这要归功于FackeBook的MysqlBug 64673。
由于内部索引文件段只有3个页面，正如预期的那样，文件段列表都是空的:

$ innodb_space -f test/t.ibd -p 3 index-fseg-internal-lists
name                length      f_page      f_offset    l_page      l_offset    
free                0           0           0           0           0           
not_full            0           0           0           0           0           
full                0           0           0           0           0

这三个使用的页面被分配为片段页:

$ innodb_space -f test/t.ibd -p 3 index-fseg-internal-frag-pages
page        index   level   data    free    records 
3           15      2       26      16226   2       
36          15      1       14521   1401    1117    
37          15      1       13585   2341    1045

叶索引文件段列表显示非常繁忙，有32个完整的区段和6个不完整的区段:

$ innodb_space -f test/t.ibd -p 3 index-fseg-leaf-lists
name                length      f_page      f_offset    l_page      l_offset    
free                0           0           0           0           0           
not_full            6           0           1518        0           1718        
full                33          0           198         0           1478

此外，叶索引文件段已经分配了所有可能的32个片段页(在以上任何完整区段之前):

$ innodb_space -f test/t.ibd -p 3 index-fseg-leaf-frag-pages
page        index   level   data    free    records 
4           15      0       9812    6286    446     
5           15      0       15158   860     689     
6           15      0       10912   5170    496     
7           15      0       10670   5412    485     
8           15      0       12980   3066    590     
9           15      0       11264   4808    512     
10          15      0       4488    11690   204     
11          15      0       9680    6418    440     
12          15      0       9306    6800    423     
13          15      0       9658    6434    439     
14          15      0       10032   6062    456     
15          15      0       9988    6108    454     
16          15      0       9570    6530    435     
17          15      0       9130    6978    415     
18          15      0       8844    7266    402     
19          15      0       11770   4300    535     
20          15      0       9020    7092    410     
21          15      0       8646    7462    393     
22          15      0       9746    6354    443     
23          15      0       11066   5014    503     
24          15      0       8910    7204    405     
25          15      0       11748   4322    534     
26          15      0       10978   5094    499     
27          15      0       11132   4940    506     
28          15      0       9350    6750    425     
29          15      0       13508   2526    614     
30          15      0       14938   1082    679     
31          15      0       14520   1506    660     
32          15      0       9086    7016    413     
33          15      0       9724    6368    442     
34          15      0       10978   5102    499     
35          15      0       9504    6592    432

完整的区段，如预期的，都是满的:

$ innodb_space -f test/t.ibd -p 3 -L full index-fseg-leaf-list-iterate
start_page  page_used_bitmap                                                
64          ################################################################
128         ################################################################
192         ################################################################
256         ################################################################
320         ################################################################
384         ################################################################
448         ################################################################
512         ################################################################
576         ################################################################
640         ################################################################
704         ################################################################
768         ################################################################
832         ################################################################
896         ################################################################
960         ################################################################
1024        ################################################################
1088        ################################################################
1152        ################################################################
1216        ################################################################
1280        ################################################################
1344        ################################################################
1408        ################################################################
1472        ################################################################
1536        ################################################################
1600        ################################################################
1664        ################################################################
1728        ################################################################
1792        ################################################################
1856        ################################################################
1920        ################################################################
1984        ################################################################
2048        ################################################################
2112        ################################################################

正如预期的那样，not_full区段全部被部分填充:

$ innodb_space -f test/t.ibd -p 3 -L not_full index-fseg-leaf-list-iterate
start_page  page_used_bitmap                                                
2176        #############...................................................
2240        #...............................................................
2304        #...............................................................
2368        #...............................................................
2432        #...............................................................
2496        #...............................................................

你可以在这里看到InnoDB的页面分割优化:为了在磁盘上按顺序排列数据，它已经多次将第一个页面移出(这是由于页号的“暗示”，这是不确定的)。未来将对这种行为进行更深入的研究。

查看全文
如若内容造成侵权/违法违规/事实不符，请联系编程学习网邮箱：809451989@qq.com进行投诉反馈，一经查实，立即删除！

1480. 一维数组的动态和
文|MESeraph class Solution { public:vector<int> runningSum(vector<int>& nums) {vector<int>::iterator itr;int sum=0;for(itr=nums.begin(); itr!=nums.end(); itr++){sum += *itr;*itr = sum;}return nums;} };...
2024/4/19 14:55:05
分红险是骗局？搞清楚这四个问题，再下手也不迟
相信大家都看过朋友圈里的保险公司“开门红”广告，无论是朋友圈文案，还是贴出来的盈利演示图，都特别吸引人。有些声称只需交几十万，若干年后，账户数字就轻松变成百万级别，坐着就能钱生钱，五位数存款分分钟变成六位数，甚至七位数。一旦有人兴冲冲地购买，很快就要失望了…...
2024/4/25 5:01:07
StringUtils中 isNotEmpty 和isNotBlank的区别
StringUtils中 isNotEmpty 和isNotBlank的区别参考 isNotEmpty将空格也作为参数，isNotBlank则排除空格参数参考 StringUtils方法的操作对象是java.lang.String类型的对象，是JDK提供的String类型操作方法的补充，并且是null安全的(即如果输入参数String为null则不会抛出NullP…...
2024/4/26 14:36:55
pyhton基础总结（一）数据类型和变量
数据类型 Python中主要的数据类型有以下几种：整数：和数学中的写法相同，分为正整数和负整数。整数有两种除法，一种除法是/，结果为浮点数。另一种为//，称为地板除，两个整数的除法仍然是整数。%为取模，也就是取余数。浮点数：相当于数学中的小数，因为常用科学计数法…...
2024/4/11 22:36:52
七、selenium07 等待处理
为了保证脚本的稳定性，有时候需要引入等待时间，等待页面加载元素后再进行操作，selenium提供三种等待时间设置方式。1、sleep()：固定休眠时间设置，python的time包里提供了休眠方法sleep, 导入包后就能使用； sleep()方法以秒为单位，如果超时设置小于1秒，可以使用小数 im…...
2024/4/26 18:20:02
前端基础表单标签和CSS基础
一.表单标签 1.表单标签：form是一个容器标签，本身单独用没有意义，一般需要结合表单相关的标签（input、select、textarea）来使用。它可以对表单标签中所有用户信息收集相关的标签的内容进行整体的重置和提交 action属性 - 后端数据接口的地址 method属性 - 请求方式（…...
2024/4/21 17:17:44
Java的静态代码块
看如下的代码输出结果： public class C {static{System.out.println("c");}public C(){System.out.println("cc");} } public class D extends C{static{System.out.println("d");}public D(){System.out.println("dd");} } class F{…...
2024/4/19 20:15:27
记一次前端无法关闭的排障过程
晚上喝了半瓶酒，然后洗了个澡，正在贴地飞行的时候，被隔壁给拽到了地面上：他的前端关不掉了。我说怎么可能呢，啥症状？他说他把前端部署到80端口了，然后无论怎么搞都关不掉，重启了也没用。我说你看看80端口的进程，然后他熟练打出了netstat -ano | findstr 80，结果啥都…...
2024/4/21 20:35:10
Java之集合(List和Set)
集合的概念概念:对象的容器,定义了对多个对象进行操作的常用方法,可实现数组的功能和数组的区别:数组的长度固定,集合长度不固定数组可以存储基本类型和引用类型.集合只能存储引用类型位置:java.util.*;集合只能存放对象,比如存一个int型数据i放入集合中,其实它是自动转换成…...
2024/4/25 6:25:00
linux：“本地，官方，Other非官方” YUM仓库搭建技术与NFS共享服务
本章结构 YUM仓库服务NFS共享存储服务YUM概述YUM（Yellow dog Updater Modified）软件仓库的提供方式RPM软件包的来源构建Centos 7 YUM软件仓库搭建一个官方YUM仓库在软件仓库中加入非官方RPM包组搭建本地YUM仓库YUM的工具概述关于YUM命令YUM的配置文件YUM查询软件包YUM查询软件…...
2024/4/21 3:59:13
spring jdbctemplate 实体列与数据表列查询
目录1. BeanPropertyRowMapper接口2. 创建mapper类实现接口 1. BeanPropertyRowMapper接口当我查询时，使用下面的接口，原理是根据实体类的字段名和表的列名相同时才有结果，否则对应的字段是nullList<MusicSong> songList = jdbcTemplate.query(sql.toString(), new Ob…...
2024/4/21 18:37:46
微信小程序Taro hooks 之 1无法获取用户授权 2.路由参数传递，页面接收不到，报错$router不存在；修改微信小程序标题； AtInput 在taro hooks 使用中好像不支持onC
2020.8.19 Taro hooks 微信小程序项目使用之路零碎关于微信小程序项目获取页面传参问题： 1.无法获取用户授权：错误：用onClick在函数内试图获取，修改之后：主要还是的认真看看官方提供的组件说明等，获取自动用户授权，未允许过会弹出请求，允许之后第二次，不会再有…...
2024/4/23 13:53:22
linux网络服务[DNS域名系统服务]——————DNS介绍、域名的组成和分类、域名解析过程、了解分布式DNS服务器、DNS软件信息、DNS配置文件解读
文章目录1. DNS介绍1.1 什么是域名？1.2 什么是DNS？1.3 域名的组成和分类2. 域名解析过程3.分布式DNS服务器4.DNS软件信息 1. DNS介绍 1.1 什么是域名？域名（Domain Name），简称域名、网域，是由一串用点作为分隔符隔开的一些字母数字组成的字符串。作用是在互联网上标识一…...
2024/4/23 11:15:23
数据库一些常用的指令
1.show databases; 显示所有的库 2.use mysql; 切换到mysql库 3.show tables;显示所有的表 4.建表语句： create table tb_a(aId int,aName varchar(10)); 5.插入语句：insert into tb_a values查看表数据： select * from tb_a; 6…连接数据库本机数据库：mysql -hloc…...
2024/4/15 15:16:57
基于spring的定时任务的实现
一、直接通过@Scheduled来实现 @Configuration @EnableScheduling public class TaskTimingJob {@Scheduled(fixedDelay=60000)private void configureTasks() {// todo} }@Scheduled主要的四个参数说明如下：1、fixedRate是指上一次任务的开始时间到下一次任务的开始时间的间隔…...
2024/4/26 4:38:40
深度可分离卷积
转载自：https://zhuanlan.zhihu.com/p/92134485 一些轻量级的网络，如mobilenet中，会有深度可分离卷积depthwise separable convolution，由depthwise(DW)和pointwise(PW)两个部分结合起来，用来提取特征feature map相比常规的卷积操作，其参数数量和运算成本比较低常规卷积操…...
2024/4/25 2:00:33
【题解】【LeetCode】53. 最大子序和
原题传送：链接 53. 最大子序和给定一个整数数组 nums，找到一个具有最大和的连续子数组（子数组最少包含一个元素），返回其最大和。示例 : 输入: [-2,1,-3,4,-1,2,1,-5,4] 输出: 6 解释: 连续子数组 [4,-1,2,1] 的和最大，为 6。进阶: 如果你已经实现复杂度为 O(n) 的解法，…...
2024/4/9 21:16:47
KCF视觉跟踪算法原理
KCF视觉跟踪算法原理 Refrence:KCF跟踪算法原理入门详解 Kernelized Correlation Filters...
2024/4/16 0:41:57
接口测试系列（二）-POSTMAN的简单使用
POSTMAN的简单使用postman的基本使用概述我相信对于postman的介绍，网上一搜肯定很多很多。下面我就不打算跟大家普及postman了。只看应该怎么用postman进行接口测试。好了，下面咱们直接进入正文吧。环境postman之前是作为chrome插件形式存在的。后面变成了独立的应用需要下载…...
2024/4/25 12:47:43
C语言数据结构之顺序队列
C语言数据结构之顺序队列 tips：前些天学习了顺序表和顺序栈，今天来看看c语言数据结构之队列的基本操作。队列的特点是先进先出，后进后出。因此我们使用一个队头指针和一个队尾指针分别指向队头元素，以及队尾元素的下一个位置。首先我们创建一个顺序队列的结构体 #define Ma…...
2024/4/20 7:57:44

Exploring InnoDB page management with innodb_ruby（5.用innodb_ruby分析InnoDB的页管理）

一个最小的空表

一个有100万行的表

相关文章

最新文章