您当前的位置:首页 > 电脑百科 > 数据库 > MYSQL

用了三年MySQL,还不知道Server层和引擎层是如何交互的?

时间:2023-03-03 16:03:45  来源:今日头条  作者:程序员拾山
那不知道大家有没有深入了解过,当我们的一条SQL命令被执行时,MySQL是如何把数据从硬盘/内存中查出来并展示到用户面前的呢?

对于很多开发小伙伴来说,每天写SQL是必不可少的一项工作。

那不知道大家有没有深入了解过,当我们的一条SQL命令被执行时,MySQL是如何把数据从硬盘/内存中查出来并展示到用户面前的呢?

其实MySQL也没有大家想象的那么神秘,当我们从整个架构的角度去看待,MySQL会分为Server层和引擎层。

Server层主要包含连接器、分析器、优化器、执行器,还有各种函数之类的东西等等。

而引擎层就是用来真正处理数据,比如保存数据,提供读写接口供Server使用。

并且引擎层是可插拔的,就是说我们可以使用各种类型的引擎,比如最常见的InnoDB引擎。

甚至你不想使用官方的引擎,自己开发一个也是可以的。

那更进一步,MySQL是如何查询一条数据的呢?

以上图为例,是一个简陋版的普通二级索引B+树结构。

图中的每个颜色代表一个数据页,每个数据页中的数据会按照从小到大的顺序排列,并且会组成一个单向链表,即前一条数据有一个指向后一条数据的指针。不同的数据页之间也会组成一个双向链表。

这样的好处在于,当查询到第一条数据之后,只需要按照顺序查下一条数据,而不用再次从根节点往下查,大大节省了查询效率。

好了,我们回归正题,下面以一个简单的例子,看一下Server层和引擎层是如何分工的。

我们知道,MySQL在执行一条sql之前,会通过优化器生成执行计划,选择合适的索引。

以下面这条sql为例:

SELECT * FROM system_log 
WHERE create_time BETWEEN '2022-01-01' AND '2022-02-01';

我们按照创建时间查询日志表的一些记录,并且对创建时间字段create_time加上索引,那么执行计划就是这样的:

从上图中我们可以看到,MySQL选择了索引index_createTime,执行type是range,表示会按照范围进行查询。

那么Server层和引擎层是如何分工的呢?

1、Server通过执行器调用InnoDB引擎的查询接口,InnoDB引擎根据条件开始定位第一条记录。/2、由于选择使用index_createTime索引,那么InnoDB引擎就会去这颗索引树上,查找符合条件的第一条记录。

而我们使用的是select *,要查询全部的数据,而普通索引树上的叶子节点只保存着索引列和主键列,所以需要拿着主键id去聚簇索引回表,查询一条完整的记录。

查询到完整记录之后,InnoDB就会把这条数据发送给Server,Server把这条数据返回给客户端。(隐藏知识点:MySQL是边查边发的)

3、InnoDB继续查询下一条数据,在上文我们说过,数据页中数据会组成一个单向链表,可以很方便的直接定位到下一条数据,找到下一条数据之后,判断是否符合条件,如果符合,就继续回表查询完整数据,然后再把数据发送给Server,Server再把数据返回到客户端。

就这样,不断的重复这个步骤,直到InnoDB匹配到不符合条件的记录,就停止查询,告诉Server数据已经查完了。

Server层和引擎层的交互大致就是这样的。

总结一下就是:Server调用InnoDB引擎接口查询数据,引擎把数据一条条的查出来并不断的反馈给Server,Server再将数据返回给客户端。

另外,我们可以在上图的执行计划中看到extra中出现了Using index condition的字样,这表示MySQL使用了索引下推的优化策略。

有时我们还能发现extra中会出现Using Where 的提示,这是什么意思呢?

比如我们改一下上面的查询sql,增加一个request_id='232333'的查询条件。

SELECT
  * 
FROM
  system_log 
WHERE
  create_time BETWEEN '2022-01-01' 
  AND '2022-02-01' 
  AND request_id = '232333';

再次通过explAIn查看执行计划:

Using where的意思就是说InnoDB引擎查询到一条数据之后,虽然这条数据满足create_time BETWEEN '2022-01-01' AND '2022-02-01'这个条件,但是还需要Server层再去判断一下是否符合request_id = '232333'这个条件,两者都符合的情况下,才会被发送到客户端。

大家看到这里应该也清楚MySQL的Server是如何与InnoDB引擎交互的了,下次再遇到面试官问这种问题,相信大家就知道该怎么回答了。



Tags:MySQL   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,不构成投资建议。投资者据此操作,风险自担。如有任何标注错误或版权侵犯请与我们联系,我们将及时更正、删除。
▌相关推荐
MySQL 核心模块揭秘
server 层会创建一个 SAVEPOINT 对象,用于存放 savepoint 信息。binlog 会把 binlog offset 写入 server 层为它分配的一块 8 字节的内存里。 InnoDB 会维护自己的 savepoint...【详细内容】
2024-04-03  Search: MySQL  点击:(6)  评论:(0)  加入收藏
MySQL 核心模块揭秘,你看明白了吗?
为了提升分配 undo 段的效率,事务提交过程中,InnoDB 会缓存一些 undo 段。只要同时满足两个条件,insert undo 段或 update undo 段就能被缓存。1. 关于缓存 undo 段为了提升分...【详细内容】
2024-03-27  Search: MySQL  点击:(11)  评论:(0)  加入收藏
MySQL:BUG导致DDL语句无谓的索引重建
对于5.7.23之前的版本在评估类似DDL操作的时候需要谨慎,可能评估为瞬间操作,但是实际上线的时候跑了很久,这个就容易导致超过维护窗口,甚至更大的故障。一、问题模拟使用5.7.22...【详细内容】
2024-03-26  Search: MySQL  点击:(10)  评论:(0)  加入收藏
从 MySQL 到 ByteHouse,抖音精准推荐存储架构重构解读
ByteHouse是一款OLAP引擎,具备查询效率高的特点,在硬件需求上相对较低,且具有良好的水平扩展性,如果数据量进一步增长,可以通过增加服务器数量来提升处理能力。本文将从兴趣圈层...【详细内容】
2024-03-22  Search: MySQL  点击:(24)  评论:(0)  加入收藏
MySQL自增主键一定是连续的吗?
测试环境:MySQL版本:8.0数据库表:T (主键id,唯一索引c,普通字段d)如果你的业务设计依赖于自增主键的连续性,这个设计假设自增主键是连续的。但实际上,这样的假设是错的,因为自增主键不...【详细内容】
2024-03-10  Search: MySQL  点击:(6)  评论:(0)  加入收藏
准线上事故之MySQL优化器索引选错
1 背景最近组里来了许多新的小伙伴,大家在一起聊聊技术,有小兄弟提到了MySQL的优化器的内部策略,想起了之前在公司出现的一个线上问题,今天借着这个机会,在这里分享下过程和结论...【详细内容】
2024-03-07  Search: MySQL  点击:(28)  评论:(0)  加入收藏
MySQL数据恢复,你会吗?
今天分享一下binlog2sql,它是一款比较常用的数据恢复工具,可以通过它从MySQL binlog解析出你要的SQL,并根据不同选项,可以得到原始SQL、回滚SQL、去除主键的INSERT SQL等。主要...【详细内容】
2024-02-22  Search: MySQL  点击:(47)  评论:(0)  加入收藏
如何在MySQL中实现数据的版本管理和回滚操作?
实现数据的版本管理和回滚操作在MySQL中可以通过以下几种方式实现,包括使用事务、备份恢复、日志和版本控制工具等。下面将详细介绍这些方法。1.使用事务:MySQL支持事务操作,可...【详细内容】
2024-02-20  Search: MySQL  点击:(53)  评论:(0)  加入收藏
为什么高性能场景选用Postgres SQL 而不是 MySQL
一、 数据库简介 TLDR;1.1 MySQL MySQL声称自己是最流行的开源数据库,它属于最流行的RDBMS (Relational Database Management System,关系数据库管理系统)应用软件之一。LAMP...【详细内容】
2024-02-19  Search: MySQL  点击:(38)  评论:(0)  加入收藏
MySQL数据库如何生成分组排序的序号
经常进行数据分析的小伙伴经常会需要生成序号或进行数据分组排序并生成序号。在MySQL8.0中可以使用窗口函数来实现,可以参考历史文章有了这些函数,统计分析事半功倍进行了解。...【详细内容】
2024-01-30  Search: MySQL  点击:(54)  评论:(0)  加入收藏
▌简易百科推荐
MySQL 核心模块揭秘
server 层会创建一个 SAVEPOINT 对象,用于存放 savepoint 信息。binlog 会把 binlog offset 写入 server 层为它分配的一块 8 字节的内存里。 InnoDB 会维护自己的 savepoint...【详细内容】
2024-04-03  爱可生开源社区    Tags:MySQL   点击:(6)  评论:(0)  加入收藏
MySQL 核心模块揭秘,你看明白了吗?
为了提升分配 undo 段的效率,事务提交过程中,InnoDB 会缓存一些 undo 段。只要同时满足两个条件,insert undo 段或 update undo 段就能被缓存。1. 关于缓存 undo 段为了提升分...【详细内容】
2024-03-27  爱可生开源社区  微信公众号  Tags:MySQL   点击:(11)  评论:(0)  加入收藏
MySQL:BUG导致DDL语句无谓的索引重建
对于5.7.23之前的版本在评估类似DDL操作的时候需要谨慎,可能评估为瞬间操作,但是实际上线的时候跑了很久,这个就容易导致超过维护窗口,甚至更大的故障。一、问题模拟使用5.7.22...【详细内容】
2024-03-26  MySQL学习  微信公众号  Tags:MySQL   点击:(10)  评论:(0)  加入收藏
从 MySQL 到 ByteHouse,抖音精准推荐存储架构重构解读
ByteHouse是一款OLAP引擎,具备查询效率高的特点,在硬件需求上相对较低,且具有良好的水平扩展性,如果数据量进一步增长,可以通过增加服务器数量来提升处理能力。本文将从兴趣圈层...【详细内容】
2024-03-22  字节跳动技术团队    Tags:ByteHouse   点击:(24)  评论:(0)  加入收藏
MySQL自增主键一定是连续的吗?
测试环境:MySQL版本:8.0数据库表:T (主键id,唯一索引c,普通字段d)如果你的业务设计依赖于自增主键的连续性,这个设计假设自增主键是连续的。但实际上,这样的假设是错的,因为自增主键不...【详细内容】
2024-03-10    dbaplus社群  Tags:MySQL   点击:(6)  评论:(0)  加入收藏
准线上事故之MySQL优化器索引选错
1 背景最近组里来了许多新的小伙伴,大家在一起聊聊技术,有小兄弟提到了MySQL的优化器的内部策略,想起了之前在公司出现的一个线上问题,今天借着这个机会,在这里分享下过程和结论...【详细内容】
2024-03-07  转转技术  微信公众号  Tags:MySQL   点击:(28)  评论:(0)  加入收藏
MySQL数据恢复,你会吗?
今天分享一下binlog2sql,它是一款比较常用的数据恢复工具,可以通过它从MySQL binlog解析出你要的SQL,并根据不同选项,可以得到原始SQL、回滚SQL、去除主键的INSERT SQL等。主要...【详细内容】
2024-02-22  数据库干货铺  微信公众号  Tags:MySQL   点击:(47)  评论:(0)  加入收藏
如何在MySQL中实现数据的版本管理和回滚操作?
实现数据的版本管理和回滚操作在MySQL中可以通过以下几种方式实现,包括使用事务、备份恢复、日志和版本控制工具等。下面将详细介绍这些方法。1.使用事务:MySQL支持事务操作,可...【详细内容】
2024-02-20  编程技术汇    Tags:MySQL   点击:(53)  评论:(0)  加入收藏
MySQL数据库如何生成分组排序的序号
经常进行数据分析的小伙伴经常会需要生成序号或进行数据分组排序并生成序号。在MySQL8.0中可以使用窗口函数来实现,可以参考历史文章有了这些函数,统计分析事半功倍进行了解。...【详细内容】
2024-01-30  数据库干货铺  微信公众号  Tags:MySQL   点击:(54)  评论:(0)  加入收藏
mysql索引失效的场景
MySQL中索引失效是指数据库查询时无法有效利用索引,这可能导致查询性能显著下降。以下是一些常见的MySQL索引失效的场景:1.使用非前导列进行查询: 假设有一个复合索引 (A, B)。...【详细内容】
2024-01-15  小王爱编程  今日头条  Tags:mysql索引   点击:(85)  评论:(0)  加入收藏
站内最新
站内热门
站内头条